Construcción de instrumentos de medida para la evaluación universitaria

In this paper, we analyze the methodological problems involved in the evaluation of universities. We describe the technical and procedural aspects required to carry out rigorous assessments in the college context, particularly with respect to research and teaching. We start by reviewing the different components of the integral evaluation process, such as determining what is assessed, who are the assessors, how to asses in a technically sound way, providing feedback to all stakeholders, developing improvement plans derived from the evaluation, and measuring the opinions of those involved in the evaluation process. Special attention is paid to the technology and the methodology required for developing reliable and valid assessment instruments. Ten steps followed to develop rigorous and objective assessment instruments are described in detail, pointing out the possible difficulties and problems to be found. Finally, we discuss future directions for college evaluation.En el artículo se analizan los problemas metodológicos implicados en la evaluación universitaria. Se trata de analizar todos aquellos aspectos técnicos y de procedimiento que son necesarios para llevar a cabo evaluaciones rigurosas en el ámbito universitario, tanto en lo relativo a investigación, como a la docencia y gestión. Para ello se repasarán los distintos componentes de un proceso evaluativo integral, a saber, qué se evalúa, partes legítimamente implicadas, quién evalúa, cómo se evalúa, feedback a las partes, planes de mejora, y opinión de las partes. Se hará especial hincapié en los requisitos metodológicos necesarios para que los instrumentos de medida utilizados en la evaluación sean fiables y válidos. Para ello se describen diez pasos necesarios que hay que seguir para construir y analizar este tipo de instrumentos de medida. Se finaliza discutiendo las perspectivas de futuro en el ámbito de la evaluación universitaria