Speech-Enabled Handheld Computing for Fieldwork

This paper discusses the advantages and challenges of using speech recognition on mobile devices, for field data collection and real-time communication. Multimodal and voice technology, for speech-enabled information retrieval and input, using mobile phones or handheld computing devices is explained. Multimodal technology enables more complete information communication and supports timely and effective decision-making. It also helps to overcome the limitations imposed by the small screen of mobile devices.<br /><br />The paper describes several prototype, industrial, mobile solutions developed for the field entry of data and real-time communication that utilize voice and multimodal interaction. In one of these projects, a field concrete inspector can enter inspection results using variable interaction modalities such as speech, stylus, or keyboard on a handheld device, or speech-only on a mobile phone. The author describes prototype applications developed, and presents several usage scenarios for field and maintenance applications, as well as for emergency response.L'auteur de cette communication discute des avantages et des difficult\ue9s de la reconnaissance vocale pour l'utilisation d'appareils mobiles permettant de collecter des donn\ue9es sur le terrain et de communiquer en temps r\ue9el. Ils expliquent l'application d'appareils multimodaux (t\ue9l\ue9phones mobiles et appareils portatifs) et de la technologie vocale \ue0 l'entr\ue9e et \ue0 la r\ue9cup\ue9ration vocales d'information. La technologie multimodale permet la communication d'informations plus compl\ue8tes et soutient la prise de d\ue9cisions efficaces en temps opportun. Elle aide aussi \ue0 surmonter les restrictions impos\ue9es par le petit \ue9cran des appareils mobiles.<br /><br />On d\ue9crit plusieurs prototypes de solutions mobiles et industrielles pour l'entr\ue9e de donn\ue9es sur le terrain et leur communication en temps r\ue9el, qui repose sur l'interaction vocale et multimodale. L'un des projets a vu un inspecteur de b\ue9ton entrer, sur place, les r\ue9sultats de ses inspections \ue0 l'aide de modalit\ue9s d'interaction variables (langage, stylet ou clavier dans le cas d'un appareil portatif, ou langage seulement pour un t\ue9l\ue9phone mobile). L'auteur d\ue9crit les prototypes d'applications mis au point et pr\ue9sente plusieurs sc\ue9narios d'utilisation - sur le terrain, entretien, interventions d'urgence.NRC publication: Ye