Glossaire
Métrique automatique
Score comparant une sortie machine à une traduction de référence : BLEU, chrF, COMET et leurs variantes.
Aussi appelé : BLEU, chrF, COMET
- Allemand
- Automatische Metrik
- Anglais
- Automatic metric
- Italien
- Metrica automatica
Ces scores servent à comparer deux systèmes sur un même corpus de test. Ils ne servent pas à juger une traduction isolée, et une différence de quelques points n’a le plus souvent aucune signification pratique.
BLEU, le plus ancien et le plus cité, compare des séquences de mots ; il pénalise les reformulations correctes. COMET, fondé sur des représentations sémantiques, corrèle nettement mieux avec le jugement humain. Les argumentaires commerciaux citent encore massivement BLEU, parce qu’il est facile à améliorer artificiellement.
À ne pas confondre avec