A new proposal to construct an undergraduate programs' ranking for Colombia: cases of industrial and systems engineering

Los rankings de los programas son una herramienta util para brindar informacion [...] ; Este documento presenta una propuesta para la construccion de un ranking de programas empleando pruebas estandarizadas. El indice tiene en cuenta la tendencia central del puntaje de la prueba por programa, la dispersion de los puntajes, la proporcion de estudiantes del programa con puntajes por encima de la media de todos los de la disciplina que toman la prueba y el numero de estudiantes por programa. Para brindar un ejemplo, la metodologia propuesta se aplica empleando las pruebas Saber Pro de Colombia para el 2013 (ultimo ano con informacion publica disponible). En especial, se centra la atencion en los programas universitarios de ingenieria industrial e ingenieria de sistemas. Al aplicarles la metodologia, se encuentra que cinco de los diez mejores programas en Colombia se encuentran en la capital del pais. Ademas, el 40% del top diez de programas de ingenieria de sistemas e industrial pertenecen a universidades publicas. Por ultimo, el 60% del top 20 de programas de ingenieria de sistemas tienen acreditacion de alta calidad, frente al 70% de programas de ingenieria industrial con dicho reconocimiento. Futuros trabajos se encaminaran a determinar la estabilidad del indice sugerido a cambios en las ponderaciones y a su aplicacion a otros programas y a los subcomponentes de la prueba Saber Pro. No obstante, el esfuerzo de convertir los resultados de los examenes Saber Pro en informacion que permita comparar programas es un esfuerzo que puede ser empleado como insumo importante en la evaluacion y construccion de politicas publicas.This document presents a proposal for using Standardized-exit exams to rank undergraduate programs. The proposed takes into account each program's mean score, volatility, students' proportion with scores above the national mean, and the number of students taking the exam. The document presents an application of the suggested index for two different programs in Colombia: Software Engineering and Industrial Engineering. The results show that five out of the top ten Industrial Engineering and Industrial Engineering programs are located in Bogota (the capital). On the other hand, 40% of the top ten Industrial Engineering and Software Engineering programs are offered by public schools. Finally, 60% of the top twenty Software Engineering programs hold a high quality accreditation. For Industrial Engineering programs 70% of the top twenty programs have the high quality accreditation. Future studies will determine the robustness of the proposed indicator to changes in its weights and its application to other professional programs and topics in standardized tests. However, this proposal represents an effort to process the results of standardized exams to provide information that can be used to compare educational programs and hence, for the assessment and formulation of educational policy