VoiceGrip : A Tool for Programming-by-Voice

In recent years, there has been an increase in the number of computer programmers suffering from Repetitive Strain Injury (RSI)-an umbrella term covering a series of musculoskeletal disorders caused by repetitive motion of the hands and arms. For those individuals, or any programmer with a handicap that precludes keyboard and/or mouse input, Speech Recognition (SR) is an attractive alternative because it could allow them to do their work without using such devices. Unfortunately, programming-by-voice with current SR systems is awkward because programming languages are not meant to be spoken. In this paper we describe various usability problems with programming-by-voice and show that none of the existing programming-by-voice tools address all of those barriers. We then present VoiceGrip, a programming-by-voice tool that adresses the widest range of programming-by-voice problems to date. VoiceGrip uses a unique approach where programmers first dictate code using an easy to utter pseudo-syntax, and then translate that automatically to native code in the appropriate programming language. The system has been downloaded by 343 individuals, and postings on a neutral programming-by-voice mailing list indicate that it is being used by at least some of them. We also present an experiment evaluating the performance of the system's symbol translation algorithm. In this experiment, the system exhibited low error rates in the range of 2.7% when confusion between homophonic symbols (i.e. symbols that have the same spoken pseudo code form) was ignored and 6.6% when confusion between homophonic symbols was taken into account. Finally, even though VoiceGrip is the tool that currently addresses the widest range of programming-by-voice problems, we conclude that a better tool can be developed by combining features of VoiceGrip with features of other existing programming-by-voice tools.Au cours des derni\ue8res ann\ue9es, on a constat\ue9 une augmentation dans le nombre de programmeurs en informatique atteints de microtraumatismes r\ue9p\ue9t\ue9s - une expression g\ue9n\ue9rale qui englobe un grand \ue9ventail de blessures musculo squelettiques provoqu\ue9es par des mouvements r\ue9p\ue9t\ue9s des mains et des bras. Pour ces personnes, ou pour n'importe quel programmeur ayant une incapacit\ue9 qui l'emp\ueache de se servir d'un clavier ou d'une souris, la reconnaissance vocale constitue une solution de rechange attrayante, parce qu'elle leur permet d'accomplir leur travail sans se servir de tels dispositifs. Malheureusement, dans l'\ue9tat actuel des syst\ue8mes de reconnaissance vocale, la programmation par la voix est malcommode, parce que les langages de programmation n'ont pas \ue9t\ue9 con\ue7us pour \ueatre parl\ue9s. Dans cet article, nous d\ue9crivons divers probl\ue8mes d'utilisabilit\ue9 de la programmation par la voix, et d\ue9montrons qu'aucun outil existant de programmation par la voix ne permet de lever tous ces obstacles. Nous pr\ue9sentons ensuite VoiceGrip, un outil de programmation par la voix qui, \ue0 ce jour, r\ue9sout la plus grande vari\ue9t\ue9 de probl\ue8mes de programmation vocale. VoiceGrip utilise une approche unique dans laquelle le programmeur dicte tout d'abord son code dans une pseudo syntaxe facile \ue0 \ue9noncer, puis le traduit automatiquement dans le code natif, dans le langage de programmation appropri\ue9. Le syst\ue8me a \ue9t\ue9 t\ue9l\ue9charg\ue9 par 343 personnes, et les messages diffus\ue9s dans une liste de distribution neutre sur la programmation vocale indiquent qu'il est utilis\ue9 par au moins quelques unes d'entre elles. Nous pr\ue9sentons \ue9galement une exp\ue9rience qui \ue9value les performances de l'algorithme de traduction de symboles du syst\ue8me. Dans cette exp\ue9rience, le syst\ue8me a pr\ue9sent\ue9 un taux d'erreur faible, de l'ordre de 2,7 %, lorsqu'on ne tient pas compte de la confusion entre les symboles homophones (c'est-\ue0-dire les symboles dont le pseudo code se prononce de la m\ueame fa\ue7on), et de 6,6 % lorsqu'on prend en compte la confusion entre les symboles homophones. Enfin, bien que VoiceGrip soit actuellement l'outil qui permette de r\ue9soudre le plus grand nombre de probl\ue8mes de programmation vocale, nous concluons qu'on pourrait d\ue9velopper un meilleur outil en combinant les fonctions de VoiceGrip avec les fonctions d'autres outils de programmation par la voix.NRC publication: Ye