Modelo e framework para o desenvolvimento de ferramentas analíticas de apoio ao ensino, aprendizagem e gestão educacional

The use of new information and communication technologies in education that go beyond the traditional Learning Management Systems (LMS), has generated a growing volume of data, making challenging and complex the analysis of data generated to meet the decision-making levels of teaching, learning and management. Despite high expectations for data analysis in education, current research in the area is focused more specifically on student data, processes and learning behaviors, even when the focus of the research is to improve the teaching or actions at the institutional level. In order to facilitate and extend the process of data analysis in the areas of teaching, learning and management for different stakeholders, this thesis presents a conceptual model that will guide the construction of educational analytical context aware applications that support educational decision making in the micro, meso and macro levels. The conceptual model proposes the collection of educational data from multiple, heterogeneous sources in a decentralized manner using logical and physical sensors. The Model supports analysis of data collected at three levels: descriptive analysis, predictive analysis and prescriptive analysis. The conceptual model was established from an open architecture framework, extensible and reusable, which offers a simpler and unified path for both the acquisition of user behaviors in online learning, and the modeling and analysis of the collected contexts. To validate the proposed conceptual model, three applications were developed, namely: ViTrackeR, to support self-regulated learning by providing visualization of data tracking and personalized recommendations; ViMonitor to support real-time, teams of teaching and academic management providing important information on students and tutors; and ViAssess, which provides support for secure assessments online. The conceptual model was evaluated and validated in a real environment (students, tutors, teachers and administrators). The framework was rated by both developers of educational and analytical tools and by expert researchers in the field of this research, obtaining very positive results. Evaluation results indicate that the proposed conceptual model supports the development of educational applications in the three analytical levels of decision making, micro, meso and macro, and also supports the three levels of analysis provided: descriptive, predictive and prescriptive.O uso de novas tecnologias de informação e comunicação na área educacional, que vão além dos tradicionais Sistemas Gerenciadores da Aprendizagem (SGA), tem gerado um volume crescente de dados, que torna desafiadoras e complexas as análises de dados gerados para atender a tomada de decisão nos níveis de ensino, aprendizagem e gestão. Apesar das altas expectativas sobre a análise de dados no campo educacional, pesquisas atuais na área estão focadas mais especificamente sobre dados de alunos, seus processos e comportamentos de aprendizagem, até mesmo quando o foco da pesquisa é melhorar o ensino ou as ações em nível institucional. De modo a facilitar e estender o processo de análise dos dados para as áreas de ensino, aprendizagem e gestão para diferentes partes interessadas, este trabalho apresenta um Modelo Conceitual que deverá guiar a construção de aplicações analíticas educacionais cientes de contexto que apoiam a tomada de decisões educacionais nos níveis micro, meso e macro. O Modelo Conceitual propõe a coleta de dados educacionais a partir de diversas e heterogêneas fontes e de maneira descentralizada usando sensores lógicos e físicos. O Modelo suporta análises dos dados coletados em três níveis: análise descritiva, análise preditiva e análise prescritiva. O Modelo Conceitual foi implementado a partir de uma arquitetura de framework aberta, extensível e reusável, que oferece um caminho mais simples e unificado para a aquisição de comportamentos de usuários em aprendizagem online, a modelagem dos contextos coletados e análises. Para validação do Modelo Conceitual proposto, foram desenvolvidas três aplicações, a saber: ViTrackeR, para apoio à aprendizagem autorregulada provendo visualização de dados de rastreamento e recomendações personalizadas; ViMonitor, para apoio, em tempo real, às equipes de ensino e de gestão acadêmica fornecendo informações importantes sobre estudantes e tutores; e ViAssess, que provê suporte à segurança para aplicação de avaliações online. O Modelo Conceitual foi avaliado e validado em um ambiente real (por estudantes, tutores, professores e gestores). O framework foi avaliado por desenvolvedores de ferramentas analíticas educacionais e por pesquisadores especialistas no domínio desta pesquisa, obtendo resultados muito positivos. Os resultados das avaliações indicam que o Modelo Conceitual proposto suporta o desenvolvimento de aplicações analíticas educacionais nos três níveis de decisão, micro, meso e macro, e também suporta os três níveis de análises previstos: descritiva, preditiva e prescritiva