Sistema de seguimiento de usuarios y detección de comportamientos basado en Kinect

Treball de fi de grau en Sistemes AudiovisualsTutor: Narcís ParésEn este trabajo se presenta el diseño y implementación de un sistema de seguimiento de usuarios y detección de comportamientos utilizando el dispositivo Microsoft Kinect TM y su kit de desarrollo. Este módulo está integrado en la aplicación interactiva "Pico's Adventure", un videojuego de interacción a cuerpo entero para niños con Trastornos del Espectro Autista (TEA) destinado a promover la iniciación social. Dicho sistema forma parte del proyecto europeo M4ALL, proyecto con el fin de desarrollar aplicaciones basadas en el movimiento para niños con discapacidades motoras e intelectuales. Durante el diseño y desarrollo se ha hecho un estudio del juego original para poder aprovechar los sistemas de comunicación basados en el patrón observer implementados en el motor del juego, y de las necesidades específicas de los niños con TEA. El sistema implementado es capaz de detectar diferentes tipos de usuario, ciertas interacciones, tales como saludar o darse la mano con otra persona, e incluso el espacio idóneo de interacción según las necesidades del videojuego. Estas funcionalidades son necesariaspara que la aplicación ofrezca mecánicas de juego que promuevan la iniciación social de los niños con sus familiares, terapeutas o cuidadores, aprendiendo así comportamientos sociales básicos de forma lúdica.In this paper is presented the design and implementation of a tracking system and user behavior detection using the Microsoft Kinect TM device and its Development Kit. This module is integrated into the interactive application "Pico's Adventure," a whole body/ninteraction video game for children with Autism Spectrum Disorders (ASD) to promote social initiation. This system is part of the European project M4ALL in order to develop motion-based applications for children with intellectual or motor disabilities. During the design and development there has been a study of the original game to take advantage of communication systems based on the observer pattern implemented in the game engine, and the specific needs of children with ASD. The implemented system is able to detect different types of users, certain interactions, such as greetings or shaking hands with another person, and even the ideal space for interaction according to the needs of the game. These features are necessary for the application to offer game mechanics that promote social initiation of children with their families, therapists and caregivers, thus learning basic social behaviors in a playful way