Analysis and improvement of the quality of evaluation practices in High Education: The case of a group of postgraduate students

Introducción: El Marco de Calidad para la Evaluación de Gore et al., traducido por el grupo EVALfor, es un modelo para el análisis y mejora de la calidad de las prácticas de evaluación en la Educación Superior que se apoya en tres grandes dimensiones: rigor intelectual, relevancia y apoyo al estudiante. Objetivo: Tomando como referencia el citado modelo, nuestro propósito ha sido el diseño, la implementación y la evaluación de tareas de evaluación de calidad en el contexto de la asignatura de “Psicología de la Educación” del Máster de Profesor de ESO y Bachillerato, FP y Enseñanza de Idiomas. Método: Primero seleccionamos los criterios de calidad que guiarían el diseño, en virtud de las características de la materia y las condiciones de la docencia. Seguidamente usamos procedimientos de evaluación para implementar las tareas de evaluación, recoger los productos del alumnado, y conocer su opinión sobre dichas tareas (calidad percibida, satisfacción y sugerencias de mejora). Resultados: El rendimiento del alumnado aumentó notablemente respecto al del curso anterior. Los encuestados (n=28) consideraron que las tareas de evaluación diseñadas cumplían en buena medida con los criterios de calidad perseguidos, especialmente los referidos al “conocimiento profundo” (se exige utilizar los conceptos e ideas centrales del temario), “comprensión profunda” (se pide relacionar y argumentar de forma compleja sobre dichos conceptos e ideas) y “relación” (se requiere aplicar el conocimiento adquirido a problemas de la vida real). También se mostraron, por término medio, bastante satisfechos con las tareas de evaluación. Conclusiones: El Marco de Calidad para la Evaluación utilizado parece ser una herramienta útil y satisfactoria, tanto para el alumnado como para el profesorado, que ayuda a mejorar el desarrollo competencial.Introduction: The Quality Assessment Framework by Gore et al., translated into Spanish by EVALfor team, is a model for analyzing and improving the quality of evaluation practices in Higher Education. It is based on three main dimensions: intellectual quality, significance and quality learning environment. Objective: Taking this model as reference, we aimed to design, implement and evaluate high quality assessment tasks in the context of the course “Educational Psychology” (Master’s degree of Training of ESO, Bachillerato, FP and Language Secondary Teachers) Method: We first selected the specific quality criteria to be considered in the design of the tasks, while taking into account the characteristics of the course. Subsequently we used e-assessment procedures to implement the tasks, have access to students’ products and examine their opinion on the tasks (perceived quality, satisfaction, and improvement suggestions). Results: Students’ performance remarkably improved as compared to that shown by former students. Survey respondents (n=28) indicated that the tasks largely fulfilled the quality criteria pursued, primarily: deep knowledge (they were required to use key concepts), deep understanding (they were requested to provide arguments or reasoning that demonstrate the grasp of key concepts), and connectedness (they had to apply knowledge to real-life problems). In addition, on average they reported being quite satisfied with the assessment tasks. Conclusions: We have verified that the Quality Assessment Framework is a useful and satisfying tool for both students and teachers that helps to improve skills development