Multimodal Field Data Entry: Performance and Usability Issues

Mobile technologies have yet to be widely adopted by the Architectural, Engineering, and Construction (AEC) industry despite being one of the major growth areas in computing in recent years. This lack of uptake in the AEC industry is likely due, in large part, to the combination of small screen size and inappropriate interaction demands of current mobile technologies. This paper discusses the scope for multimodal interaction design - with a specific focus on speech-based interaction - to enhance the suitability of mobile technology use within the AEC industry by broadening the field data input capabilities of such technologies. To investigate the appropriateness of using multimodal technology for field data collection in the AEC industry, we have developed a prototype Multimodal Field Data Entry (MFDE) application. This application, which allows concrete testing technicians to record quality control data in the field, has been designed to support two different modalities of data input - speech-based data entry and stylus-based data entry. To compare the effectiveness or usability of, and user preference for, the different input options, we have designed a comprehensive lab-based evaluation of the application. To appropriately reflect the anticipated context of use within the study design, careful consideration had to be given to the key elements of a construction site that would potentially influence a test technician's ability to use the input techniques. These considerations and the resultant evaluation design are discussed in detail in this paper.Les technologies des appareils mobiles restent \ue0 \ueatre adopt\ue9s \ue0 grande \ue9chelle par l'industrie de l'architecture, du g\ue9nie et de la construction (AGC), malgr\ue9 que ce secteur constitue ait figur\ue9 au nombre de ceux ayant connu une forte croissance en informatique au cours des derni\ue8res ann\ue9es. Ce manque d'adh\ue9sion dans l'industrie AGC d\ue9coule probablement en grande partie de la combinaison des aspects suivants : petitesse de l'\ue9cran et demande d'interaction inappropri\ue9e des technologies des appareils actuelles. Le pr\ue9sent document traite de l'ampleur des travaux li\ue9s \ue0 la conception d'une interaction multi-modale, plus particuli\ue8rement de l'interaction fond\ue9e sur la parole, en vue d'accro\ueetre l'adaptabilit\ue9 des technologies des appareils mobiles \ue0 l'industrie AGC, et ce en augmentant les capacit\ue9s li\ue9es \ue0 la saisie des donn\ue9es de terrain de ceux-ci.Afin de voir si la technologie multi-modale se pr\ueate \ue0 la collecte de donn\ue9es de terrain dans l'industrie AGC, nous avons mis au point une application prototype de saisie multi-modale de donn\ue9es de terrain (MFDE). Cette application, qui permet aux techniciens d'essai du b\ue9ton de consigner les donn\ue9es li\ue9es au contr\uf4le de la qualit\ue9 sur le terrain, a \ue9t\ue9 con\ue7ue afin de prendre en charge deux modalit\ue9s diff\ue9rentes de saisie de donn\ue9es, soit la saisie de donn\ue9es fond\ue9e sur la parole et celle fond\ue9e sur un stylet. Pour comparer l'efficacit\ue9 ou la possibilit\ue9 d'emploi des diverses options de saisie, ainsi que les pr\ue9f\ue9rences de l'utilisateur, nous avons con\ue7u une proc\ue9dure d\ue9taill\ue9e d'\ue9valuation en laboratoire de l'application. Pour repr\ue9senter de la mani\ue8re appropri\ue9e le contexte d'emploi anticip\ue9, et ce lors de la conception de l'\ue9tude, nous avons port\ue9 une attention soutenue aux \ue9l\ue9ments principaux d'un site de construction qui pourraient influer sur la capacit\ue9 du technicien d'essai \ue0 utiliser les techniques de saisie. Les aspects qui ont \ue9t\ue9 pris en compte et la conception qui en a r\ue9sult\ue9 pour l'\ue9valuation sont trait\ue9s en d\ue9tail dans le pr\ue9sent document.NRC publication: Ye