Influence of multimodality on comprehension of audiovisual documents in foreign languages : insights into a new communicative reality

Face à l’importance accrue du travail en autonomie qu’offre Internet et à l’absence d’études comparatives sur plusieurs contextes d’apprentissage de langues étrangères (langue fréquemment enseignée, langue moins diffusée et moins enseignée, langue en contexte endogène), cette recherche a été menée afin d’étudier les méthodes de travail des apprenants lors de l’écoute ou du visionnage des documents audiovisuels en trois langues représentant ces trois situations sociales. Ainsi, notre étude porte sur la compréhension de l’oral en anglais, russe et français dans le cadre de l’évaluation formative. L’objectif de cette thèse est d’évaluer l’influence de la présence ou non d’image, ainsi que de trois facteurs sur la compréhension de documents audio et vidéo, qui sont le genre audiovisuel (poème animé et reportage), l’interactivité avec le document et les stratégies en lien avec la littératie numérique utilisées par les étudiants universitaires.Pour ce faire, six dispositifs ont été élaborés et ont été passés auprès des apprenants de différents niveaux de connaissance de trois langues. Au total, 99 participations ont été enregistrées dont 21 avec le logiciel Camtasia. Les calculs statistiques à l’aide du t-Test ont été utilisés pour la totalité des réponses afin d’en tirer les tendances générales.Notre étude démontre que le genre du document audiovisuel influence la compréhension selon son format, ainsi que selon le contexte d’apprentissage de la langue. L’efficacité des stratégies interactives et celles en lien avec la littératie numérique a été soulignée pour améliorer surtout la compréhension de documents audio. La vidéo, à son tour, a deux fonctions facilitatrices : contextualiser le contenu oral et confirmer une hypothèse ou une information entendue. En revanche, le format audio reste plus bénéfique pour le repérage de lexèmes. Cette thèse propose de nouvelles solutions didactiques pour améliorer la compréhension de l’oral en langue étrangère.Given the increased importance of autonomous work offered by the Internet and the lack of comparative studies on multiple foreign language learning contexts (commonly taught languages, less commonly taught languages, languages in an endogenous context), this research was conducted in order to study learners’ methods of practice while listening to or watching audiovisual documents in three languages representing these three social situations. Thus, our study focuses on oral comprehension in English, Russian and French within a formative assessment framework. The aim of this thesis is to evaluate the influence of presence or absence of images, as well as of three factors on the comprehension of audio and video documents: the audiovisual genre (animated poem and documentary), the interactivity with the document and the digital literacy strategies used by the university students.To this end, six assessment instruments were developed and administered to learners of different levels of knowledge of three languages. A total of 99 participations were recorded, 21 of which were recorded using Camtasia software. Statistical calculations with t-test were used for the totality of the responses in order to draw general trends.Our study shows that the genre of the audiovisual document influences comprehension according to its format, as well as according to the language learning context. The effectiveness of interactive and digital literacy strategies was highlighted in improving comprehension of audio materials in particular. Video, meanwhile, has two facilitating functions: to contextualise oral content and to confirm a hypothesis or piece of information that was heard. In contrast, the audio format remains more beneficial for lexeme identification. This thesis suggests new instructional solutions for improving foreign language oral comprehension