Proposal of a Protocol and a Computer Tool for Assessing the Bellievability of Virtual Players in Multiplayer Video Games.

L'objectif de cette thèse est de fournir une solution permettant d'évaluer la crédibilité des joueurs virtuels dans les jeux vidéo multijoueurs. L’état de l’art a permis d’analyser les protocoles existants et ainsi d’identifier sept caractéristiques qui varient considérablement d’une évaluation à l’autre. Notre analyse a également mis en évidence que les méthodes d’évaluation modifient fréquemment le gameplay, introduisant un risque important de biais. Il s’agit là d’une grave lacune car les joueurs virtuels sont ainsi évalués dans un contexte spécifique et non dans le contexte du jeu tel qu'il devrait être joué : cela pourrait fausser les résultats de l'évaluation. À la suite de nos observations, nous avons construit pas à pas un nouveau protocole que nous avons fait évoluer par essais-erreurs en s'appuyant sur les succès de son prédécesseur tout en éliminant les échecs. Pour faciliter la mise en oeuvre de ces essais, nous avons développé un système informatique qui automatise partiellement l'exécution du processus d'évaluation. Ce système est flexible et a montré sa généricité en étant utilisé dans plusieurs configurations. Enfin, nous sommes arrivés à une nouvelle proposition qui permet aux joueurs humains d’évaluer indirectement la crédibilité des joueurs virtuels en utilisant les systèmes de signalement traditionnellement utilisés pour signaler les tricheries, les abus et le harcèlement dans les jeux vidéo en ligne. Le but de notre proposition est d’ajouter des options dans les formulaires de signalement pour signaler la présence de bots. Nous avons émis l’hypothèse que plus un bot est signalé, moins il est crédible. Afin de valider notre approche, nous avons mené une expérience qui a donné des résultats très prometteursAbstract : The objective of this thesis is to provide a solution for assessing the believability of virtual players in multiplayer video games. The literature review allowed us to analyse the existing protocols and thus to identify seven characteristics that vary significantly from one assessment to another. Our analysis also highlighted that evaluation methods frequently modify the gameplay, introducing a significant risk of bias. This is a serious shortcoming as virtual players are thus assessed in a specific context and not in the context of the game the way it should be played: this could skew the results of the assessment. We consequently embarked on a system of trial and error, each new protocol drawing on the successes of its predecessor whilst eliminating the failures. To facilitate the implementation of these trials, we have developed a computer system that partially automates the execution of the evaluation process. This system is flexible and has shown its genericity by being used in several configurations. Finally, we arrived at a novel proposal which allows gamers to indirectly asses the believability of virtual players by using the reporting systems traditionally used to report cheating, abuse and harassment in online video games. The goal of our proposal is to add options in reporting forms that would report the presence of bots. We hypothesised that the more often a bot is reported, the less believable it is. In order to validate our approach, we conducted an experiment which gave very promising results