LEPOR est une métrique d'évaluation de traduction automatique indépendante de la langue. LEPOR est open source, gratuit à des fins de recherche. Des expériences sur les corpus ACL-WMT11 (de l'anglais vers l'allemand, le français, l'espagnol, le tchèque et dans le sens inverse) montrent que LEPOR produit des scores de corrélation plus élevés avec les jugements humains au niveau du système, par rapport aux évaluations BLEU, METEOR, TER, MP4IBM1 et AMBER. métrique. Une connaissance détaillée de LEPOR est présentée dans l'article "LEPOR: A Robust Evaluation Metric for Machine Translation with Augmented Factors" par Aaron Li-Feng Han, Derek F. Wong et Lidia S. Chao, dans les actes de la 24e Conférence internationale sur la linguistique computationnelle. (COLING 2012), pages 441 à 450, Mumbai, décembre 2012. Code source : https://github.com/aaronlifenghan/aaron-project-lepor & https://code.google.com/p/aaron-project-lepor/ Article en ligne : http://aclweb.org/anthology-new/C /C12/C12-2044.pdf.
La version améliorée des métriques hLEPOR et nLEPOR est présentée dans l'article "Unsupervised Quality Estimation Model for English to German Translation and Its Application in Extensive Supervised Evaluation" par Aaron Li-Feng Han, Derek F. Wong, Lidia S. Chao, Liangye. Lui et Yi Lu. 2013. The Scientific World Journal, numéro : Progrès récents des technologies de l'information. Société d'édition hindawi. [http://www.hindawi.com/journals/tswj/aip/760301/]
Si vous utilisez la métrique LEPOR dans vos recherches, veuillez citer l'article.
Citations :
@inproceedings{han2012lepor, title={LEPOR : une métrique d'évaluation robuste pour la traduction automatique avec des facteurs augmentés}, author={Han, Aaron L.-F. et Wong, Derek F. et Chao, Lidia S.}, booktitle={Actes de la 24e Conférence internationale sur la linguistique computationnelle (COLING 2012)}, pages={Posters--441}, année={2012}, organisation={ Association pour la linguistique computationnelle} }
@inproceedings{han2013description, title={Une description des systèmes d'évaluation de traduction automatique réglables dans la tâche de métriques WMT13}, author={Han, Li Feng et Wong, Fai et Chao, Sam et Lu, Yi et He, Liang Ye et Wang, Yi Ming et Zhou, Jia Ji}, booktitle={Le huitième atelier sur la traduction automatique statistique, août 2013, p. 414-421}, année={2013} }
Contact : hanlifengaaron AT gmail DOT com
Adresse : ADAPT Centre, DCU, Dublin, Irlande