Multilingual Chat through Machine Translation: A Case of English-Russian

Recent developments in machine translation give hope for the possibility of communication without language barriers, as real-time interlingual conversations facilitated through automatic translation are already possible using free applications. This study aimed at measuring the level of intelligibility and accuracy of real-time chat messages translated instantly by translation bots embedded in GoogleTalk. The data consisted of chat scripts of a total of 12 sessions conducted between three pairs formed each of a native English- and Russian-speaker. The participants also answered a questionnaire about their chat experiences. The results suggest that even without any knowledge of the language of the other party, participants were able to conduct conversations on various topics without encountering any serious communication breakdown. About three fourth of the translated propositions were intelligible as well as accurate based on the human evaluation. Participants also reported positive comments on the effectiveness of this kind of interlingual communication, especially for informal chat.Les développements récents dans le domaine de traduction automatique laissent entrevoir la possibilité imminente d’une communication sans aucune barrière linguistique, les fonctions de traduction automatique fournies par des logiciels gratuits permettant déjà à des locuteurs de différentes langues d’entrer en conversation en temps réel. La présente recherche vise à mesurer le niveau d’intelligibilité et d’exactitude grammaticale des messages de clavardage traduits instantanément par des robots de traduction intégrés au logiciel de messagerie instantanée de Google : GoogleTalk. Cette étude se fonde sur un corpus de messages échangés pendant 12 séances de clavardage en temps réel entre trois paires de participants, chacune formée d’un locuteur natif anglais et d’un locuteur natif russe n’ayant aucune connaissance de la langue de l’autre partie. L’analyse des messages échangés et des questionnaires remplis par les participants montre que les participants ont pu maintenir la conversation sur des thèmes divers sans rupture de communication majeure. Environ les trois quarts des messages se sont révélés à la fois intelligibles et exacts selon l’évaluation effectuée par des humains. Les participants aussi ont formulé des commentaires positifs sur l’efficacité de cette forme de communication interlinguale, en particulier dans le cadre d’une expérience de clavardage informel