A challenge set approach to evaluating machine translation

Télécharger
  1. (PDF, 421 Ko)
  2. Obtenir@CNRC : A challenge set approach to evaluating machine translation (Ouvre dans une nouvelle fenêtre)
AuteurRechercher : ; Rechercher : ; Rechercher :
TypeArticle
Titre de la revueComputer Science
Numéro d'articlearXiv:1704.07431
Pagesnbre. de pages : 27
RésuméNeural machine translation represents an exciting leap forward in translation quality. But what longstanding weaknesses does it resolve, and which remain? We address these questions with a challenge set approach to translation evaluation and error analysis. A challenge set consists of a small set of sentences, each hand-designed to probe a system's capacity to bridge a particular structural divergence between languages. To exemplify this approach, we present an English-French challenge set, and use it to analyze phrase-based and neural systems. The resulting analysis provides not only a more fine-grained picture of the strengths of neural systems, but also insight into which linguistic phenomena remain out of reach.
Date de publication
Maison d’éditionCornell University Library
Lienhttps://arxiv.org/abs/1704.07431
Langueanglais
AffiliationTechnologies de l'information et des communications; Conseil national de recherches Canada
Publications évaluées par des pairsNon
Numéro NPARC23002238
Exporter la noticeExport en format RIS
Signaler une correctionSignaler une correction
Identificateur de l’enregistrementd03ee995-bcbb-4464-83d9-68f874d84e6c
Enregistrement créé2017-09-12
Enregistrement modifié2017-09-12
Mettre en signet et diffuser
  • Partagez cette page avec Facebook (Ouvre dans une nouvelle fenêtre)
  • Partagez cette page avec Twitter (Ouvre dans une nouvelle fenêtre)
  • Partagez cette page avec Google+ (Ouvre dans une nouvelle fenêtre)
  • Partagez cette page avec Delicious (Ouvre dans une nouvelle fenêtre)