Assessment of the quality of machine translation systems

Przedmiotem niniejszej pracy jest przede wszystkim przedstawienie roli tłumaczeń maszynowych w dzisiejszym świecie oraz analiza językowa oraz jakościowa dwóch popularnych systemów dostępnych nieodpłatnie w Internecie – Google Translate oraz Bing Translator.Tłumaczenia maszynowe są bez cienia wątpliwości nieodłączną częścią współczesnej rzeczywistości. W związku z tym, stosowne jest poddanie ich gruntownej analizie w celu unaocznienia ich zalet i wad. Dzięki temu ten szybko rozwijający się dział nauki nie pozostanie zaledwie ciekawostką w oczach przeciętnego członka społeczeństwa informacyjnego, a stanie się wartościowym narzędziem, dzięki któremu można korzystać ze źródeł informacji dostępnych w innych językach.Liczne błędy językowe popełniane przez systemy tłumaczenia maszynowego nierzadko wywołują uśmiech na twarzach ich użytkowników, w związku z czym tematyka niniejszej pracy często jest uważana za mało poważną. Mając to na uwadze, autor pracy przybliża historię tej dziedziny wiedzy, żeby pokazać jak długą drogę musieli przebyć naukowcy od wizjonerskich idei pierwszej połowy XX wieku aż do momentu, w którym można korzystać z faktycznie funkcjonalnych programów. Ponadto, przedstawione zostają problemy językowe występujące w tłumaczeniach maszynowych oraz aspekty teoretyczne oceny ich jakości, które następnie są wykorzystane w praktyce. W ostatniej części niniejszej pracy ukazane zostają kategorie tekstów, z którymi obecne systemy tłumaczenia maszynowego radzą sobie w sposób zadowalający, a także te, z którymi nie radzą sobie wcale oraz wnioski jakie można wyciągnąć z powyższej analizy.The subject of this study is mainly focused on presenting the role of machine translation nowadays as well as on a linguistic and qualitative analysis of two popular systems, available gratuitously online, i.e. Google Translate and Bing Translator.The machine translations are beyond a shadow of a doubt an inseparable part of the modern reality. Because of that, it is appropriate to subject them to a thorough analysis as a measure to reveal their merits and their flaws. Thanks to that, this quickly developing field of study will not remain merely a curiosity in the eyes of the average member of the information society, but will prove a valuable tool with which to draw on sources of information available in other languages.The numerous linguistic errors committed by the machine translation systems often evoke a smile of their users, which consequently results in the topic of this study not being treated seriously. On account of that, the author of the thesis introduces the history of this field of knowledge in order to show the very long way the scientists have come since the visionary ideas of the first half of the XX century until the moment in which it is possible to use actually functional programmes. Moreover, the linguistic problems that occur in the automatic translations are presented as well as the theoretic aspects of the assessment of their quality which are then used in practice. In the last part of this study various text types are portrayed and it is highlighted for which of them the current machine translation systems give satisfying results and with which of them they do not cope at all. Finally, conclusions that can be drawn from the aforementioned analysis are presented.L’obiettivo della presente tesi è innanzitutto quello di presentare il ruolo dei sistemi di traduzione automatica oggigiorno e l’analisi linguistica e qualitativa di due programmi noti e disponibili gratuitamente online: Google Translate e Bing Translator.Le traduzioni automatiche sono indubbiamente una parte inscindibile della realtà moderna. Di conseguenza, è opportuno sottoporle a un’analisi approfondita al fine di poter evidenziare i loro vantaggi e svantaggi. Grazie a tale approccio questo campo di studi non rimarrà soltanto una curiosità nell’ottica del membro medio della società d’informazione, ma diventerà un prezioso strumento con cui attingere a fonti di informazione disponibili in altre lingue.I numerosi errori linguistici commessi dai sistemi di traduzione automatica fanno spesso ridere ai loro utenti e, dunque, l’argomento di questa tesi è frequentemente ritenuto poco serio. Considerando ciò, l’autore della tesi introduce la storia di questo campo di conoscenza per illustrare quanto lunga è stata la strada percorsa dagli studiosi dalle prime idee lungimiranti, sorte nella prima metà del XX secolo, fino al momento in cui è possibile programmi che sono realmente funzionali. Inoltre, vengono presentati i problemi linguistici riscontrati nelle traduzioni automatiche e anche gli aspetti teorici della valutazione della loro qualità, i quali vengono, di seguito, messi in pratica. Nell’ultima parte della presente tesi vengono riportate le categorie di testi per le quali i sistemi attuali di traduzione automatica riescono a produrre una traduzione soddisfacente e quelle affrontate in maniera sfavorevole. Infine, si passa alle conclusioni che si possono trarre dalla suddetta analisi