Maclean’s Magazine University Rankings (1998-2018): Consistency of Rank and Reputation in Canada

Following 20 years of publishing rank and reputation scores for Canada’s 49 institutions of higher education, the present analysis tested five hypotheses: (1) rank and reputation should be positively correlated across schools for each year; (2) rank and reputation should be positively correlated across the 20 years for each school; (3) a school’s rank variance should be equivalent to a school’s reputation variance; (4) previous reputation would predict current rank; and (5) previous rank would predict current reputation. Results showed that whereas rank corresponded roughly to reputation for a given school, there are noteworthy exceptions. One in seven schools offered a reliable correlation between rank and reputation, and four school correlations were negative. Rank and reputation variability correlated, though (marginally) better-ranked schools had stable reputation scores over the years. Implications for future ranking exercises are discussed, as are directions for future research.   Voilà maintenant 20 ans que l’on publie le classement et la réputation des 49 établissements d’enseignement supérieur canadiens. Dans cet article, nous examinons cinq hypothèses : 1) le classement et la réputation devraient faire l’objet d’une corrélation positive parmi les établissements d’année en année; 2) le classement et la réputation devraient faire l’objet d’une corrélation positive sur toute la période de 20 ans pour chaque établissement; 3) les variations dans le classement d’un établissement devraient se refléter dans les variations de la réputation; 4) l’indice de réputation antérieur permettrait de prévoir le classement actuel d’un établissement; et 5) le classement antérieur permettrait de prévoir l’indice de réputation actuel d’un établissement. Selon les résultats de notre analyse, bien que le classement et la réputation puissent être équivalents dans le cas d’un établissement en particulier, il existe des exceptions notoires. Dans le cas d’un établissement sur sept, il y a une corrélation sûre entre le classement et la réputation. Dans le cas de quatre établissements, la corrélation s’est montrée négative. Il y a une corrélation entre les variations du classement et de la réputation, quoique les établissements un peu mieux classés ont des indices de réputation plus stables au fil du temps. Nous présentons enfin les conséquences de ces résultats pour la conception de futurs palmarès et nous proposons des avenues pour la recherche