A tracking system to look tolerant movements of the face

A crescente capacidade do poder computacional e a proliferação de dispositivos ao nosso redor vem permitindo o desenvolvimento de novas e sofisticadas interfaces para interação humano-computador que reagem à presença e ao estado de seus usuários. Como o olhar tem a capacidade de transmitir muitas informações sobre o usuário, rastreadores de olhar, dispositivos que estimam a direção para onde uma pessoa olha, tem papel importante no desenvolvimento de tais interfaces. Entre suas aplicações temos o auxílio a pessoas com dificuldades motoras, que podem utilizar um rastreador de olhar como substituto ao mouse, aplicações de diagnóstico, que estudam evidências do comportamento humano, ou ainda o desenvolvimento de interfaces que utilizem a informação sobre o olhar como um canal a mais de comunicação com o usuário para perceber suas intenções. Muitas técnicas para atingir tal objetivo foram desenvolvidas mas as tradicionais ainda oferecem certas dificuldades de uso para seus usuários como a intolerância a movimentos de cabeça e a necessidade de calibração por sessão de uso. Neste trabalho fizemos um levantamento de uma série de técnicas de rastreamento de olhar, indo das mais tradicionais até algumas mais recentes que visam melhorar a facilidade de uso destes sistemas. Uma das técnicas mais promissoras utiliza múltiplas fontes de luz fixadas nos cantos do monitor do computador. Através da análise da posição dos reflexos gerados por essas fontes de luz sobre a córnea, juntamente com a informação da posição da pupila, presentes em imagens capturadas do olho, é possível estimar o ponto observado no monitor. Devido às suas vantagens ela foi escolhida para estudo mais detalhado e implementação. Extensos testes utilizando simulações foram realizados para avaliar seu desempenho. Foi também desenvolvida uma extensão dessa técnica, utilizando um modelo mais preciso do olho, visando melhorar sua precisão. Ao final apresentamos nossa implementação, baseada nessa extensão da técnica original, que é tolerante a movimentação da face e mostramos os resultados obtidos em testes realizados com um grupo de usuários.Recent advances in computing power and the proliferation of computing devices around us allowed the development of new computer interfaces which can react to the presence and state of its users. Since gaze can transmit a lot of information about the user, gaze trackers, devices that can estimate the direction which a person is looking at, have an important role in the development of such interfaces. Among gaze tracking applications, we have aid for people with limited motor skills, human behavior studies, and the development of interfaces that can take gaze information as an additional communication channel with the user. Lots of techniques have been developed to reach this goal, but they have some problems that make them hard to be widely used. These problems are the need of calibration for each use session and the need to keep the user\'s head still. In this work we studied some of the existing gaze tracking techniques, from the more traditional ones to more recent ones. One of the most interesting techniques makes use of multiple light sources fixed at the monitor\'s corners. By analyzing the positions of corneal reflections and the pupil present in captured images of the eye, it is possible to estimate the gaze point on the monitor screen. Due to its advantages this technique was chosen for a deeper study and implementation. Lots of experiments using simulated data have been carried out to validate the technique. Using a more accurate model of the eye, an extension for this technique was also developed to increase its precision. Finally, we present our implementation, that allows for large head movement, as well as test results obtained from real users