Confidence Estimation for Machine Translations

We present a detailed study of confidence estimation for machine translation. Various methods for determining whether MT output is correct are investigated, for both whole sentences and words. Since the notion of correctness is not intuitively clear in this context, different ways of defining it are proposed. We present results on data from the NIST 2003 Chinese-to-English MT evaluation.Nous pr\ue9sentons une \ue9tude d\ue9taill\ue9e de l'\ue9valuation de confiance pour les traductions automatiques. Diverses m\ue9thodes permettent de v\ue9rifier si les donn\ue9es en sortie des traductions automatiques sont exactes, tant sur le plan des phrases que des mots utilis\ue9s dans l'ensemble. Comme la notion d'exactitude n'est pas intuitivement claire dans ce contexte, nous proposons diverses fa\ue7ons de la d\ue9finir. Nous pr\ue9sentons les r\ue9sultats de l'\ue9valuation des donn\ue9es de traductions automatiques du chinois \ue0 l'anglais NIST 2003.NRC publication: N