LEPOR は、言語に依存しない機械翻訳の評価指標です。 LEPOR はオープンソースであり、研究目的であれば無料です。 ACL-WMT11 コーパス (英語からドイツ語、フランス語、スペイン語、チェコ語、およびその逆方向) の実験では、BLEU、METEOR、TER、MP4IBM1、および AMBER の評価と比較して、LEPOR がシステムレベルで人間の判断とのより高い相関スコアを生み出すことが示されています。メトリクス。 LEPOR の詳細な知識は、第 24 回国際計算言語学会議議事録に掲載されている、Aaron Li-Feng Han、Derek F. Wong、および Lidia S. Chao による論文「LEPOR: A Robust Evaluation Metric for Machine Translation with Augmented Factors」に記載されています。 (COLING 2012)、441 ~ 450 ページ、ムンバイ、2012 年 12 月。コード: https://github.com/aaronlifenghan/aaron-project-lepor および https://code.google.com/p/aaron-project-lepor/ オンライン ペーパー: http://aclweb.org/anthology-new /C/C12/C12-2044.pdf。
メトリクス hLEPOR および nLEPOR の拡張バージョンは、Aaron Li-Feng Han、Derek F. Wong、Lidia S. Chao、Liangye による論文「英語からドイツ語への翻訳のための教師なし品質推定モデルと広範な教師あり評価におけるその応用」で紹介されています。彼とイー・ルー。 2013. The Scientific World Journal、号: 情報技術の最近の進歩。ヒンダウィ出版社。 [http://www.hindawi.com/journals/tswj/aip/760301/]
研究で LEPOR 指標を使用する場合は、その論文を引用してください。
引用:
@inproceedings{han2012lepor, title={LEPOR: 拡張要素を使用した機械翻訳の堅牢な評価指標}, author={Han, Aaron L.-F. Wong、Derek F.、Chao、Lidia S.}、booktitle={第 24 回計算言語学国際会議議事録 (COLING 2012)}、ページ={ポスター--441}、年={2012}、組織={計算言語学協会} }
@inproceedings{han2013description, title={WMT13 メトリクス タスクにおける調整可能な機械翻訳評価システムの説明}, author={Han、Li Feng と Wong、Fai と Chao、Sam と Lu、Yi と He、Liang Ye と Wang、Yi Ming と Zhou、Jia Ji}、booktitle={統計的機械翻訳に関する第 8 回ワークショップ、2013 年 8 月、p. 414-421}、年={2013} }
連絡先: hanlifengaaron AT gmail DOT com
住所: ADAPT センター、DCU、ダブリン、アイルランド