Real-Time Visual Analytics Interfaces to Strengthen Human-Automation Collaboration

Automation in today’s world supports human operators to accomplish several tasks in limited time. With more advanced automation and autonomous systems, the hu-mans’ role is shifting from hands-on operational tasks to supervisory tasks. In complex environments such as air traffic control, supervisory tasks become difficult to manage during unexpected situations as the operator needs to have a clear understanding of various resolution strategies and their consequences and make decisions about them in a limited amount of time (i.e. within a couple of minutes). In such environments, interface designers must carefully consider how information should be presented to the operators. An improper way of presenting information could, wastefully consume operators’ cognitive resources resulting in inefficient decision-making and an increased risk of failure. By designing ecological visual analytics interfaces, this thesis addresses the problem of real-time decision-making in the domain of air traffic control. The aim of this thesis has been to apply ecological design theories to the design and evaluation of visual representations to better support controllers’ analytical capabilities and decision-making. Four novel visual analytics interfaces were designed, developed, and tested over the course of this research project. To understand how the designed visual representations affected the operators’ decision-making processes, evaluation studies with air traffic controllers as well as novices without ATC experience were conducted for two of the designed interfaces and the results were analyzed. The contribution of this thesis to the field of air traffic control and visualization design is fourfold. First, the thesis contributes knowledge on what information should be visualized and how, to achieve functional goals of conflict detection and resolution task of air traffic control. Second, evolved through a series of design studies, a final interactive visual analytics interface is proposed that visualizes information about the available solution space for solving conflict situations between airborne traffic and the traffic complexity. The interface supports controllers’ decision-making process for resolving conflicts and ability to reduce the traffic complexity. Third, the method developed for evaluating the interface designs contribute with knowledge on how interfaces tailored to safety-critical systems can be tested. Fourth, findings show that the integration of ecological interface design with the development of visual representations can shape novice and expert operators’ decision-making towards domain-specific functional goals, while allowing them to follow their own problem-solving strategies. Automation hjälper mänskliga operatörer att utföra uppgifter parallellt, på begränsad tid. Med mer avancerad automation och autonoma system förändras människans roll, och går över från mer direkt kontroll till övervakning- och intervention. I komplexa miljöer som flygledning, blir övervakningsuppgifter svåra att hantera under oväntade situationer eftersom operatören behöver ha en klar förståelse för olika strategier, deras konsekvenser, och fatta beslut om dem under en begränsad tid (inom ett par minuter). I sådana miljöer måste en visualiseringsdesigner noga överväga hur information ska presenteras för operatörerna. Ett felaktigt sätt att presentera information belastar operatörernas kognitiva resurser, vilket leder till ineffektivt beslutsfattande och en ökad risk för misslyckanden. Genom att utforma ekologiska visuella analytiska gränssnitt tar denna avhandling upp problemet med beslutsfattande i realtid, i oplanerade situationer, inom området för flygledning. Syftet med denna avhandling har varit att tillämpa ekologiska designteorier på design och utvärdering av visuella representationer. Målet var att bättre stödja operatörers analytiska förmåga och beslutsfattande. Fyra nya visuella analysgränssnitt utformades, utvecklades och testades. För att förstå hur de visuella representationerna påverkade operatörernas beslutsprocesser genomfördes utvärderingsstudier med såväl flygledare som nybörjare utan domänerfarenhet för två av gränssnitten och resultaten analyserades. Avhandlingen ger fyra bidrag till området flygledning och till området visualiseringsdesign. För det första bidrar den med kunskap om vilken information som ska visualiseras och hur man uppnår funktionella mål för att upptäcka och lösa konflikter i flygledning. För det andra, utvecklat genom en serie designstudier, föreslås ett interaktivt visuellt analytiskt gränssnitt. Det visualiserar information om det tillgängliga lösningsutrymmet för att lösa konfliktsituationer mellan luftburen trafik, samt visar trafikens komplexitet. Gränssnittet utformades för att stödja beslutsprocesser för att lösa konflikter och för att minska komplexitet i trafik. För det tredje bidrar den metod som utvecklats för att utvärdera gränssnittsdesignerna, med kunskap om hur gränssnitt skräddarsydda för säkerhetskritiska system kan testas. För det fjärde bidrar avhandlingen med resultat angående integrationen av ekologisk gränssnittsdesign med utveckling av visuella representationer. Den visar hur gränssnitten kan påverka nybörjare och operatörers (experters) beslutsfattande angående domänspecifika funktionella mål, samtidigt som gränssnitten tillåter dem att följa sina egna problemlösningsstrategier.