Pushing medical exams one step ahead with IMSm

Graded exams are prerequisites for the admission to the medical state examination. Accordingly the exams must be of good quality in order to allow benchmarking with the faculty and between different universities. Criteria for good quality need to be considered - namely objectivity, validity and reliability. The guidelines for the processing of exams published by the GMA are supposed to help maintaining those criteria. In 2008 the Department of General Medicine at the University of Munich fulfils only 14 of 18 items. A review process, appropriate training of the staff and the introduction of the IMSm software were the main changes that helped to improve the 'GMA-score' to 30 fulfilled items. We see the introduction of the IMSm system as our biggest challenge ahead. IMSm helps to streamline the necessary workflow and improves their quality (e.g. by the detection of cueing, item analysis). Overall, we evaluate the steps to improve the exam process as very positive. We plan to engage co-workers outside the department to assist in the various review processes in the future. Furthermore we think it might be of value to get into contact with other departments and faculties to benefit from each other's question pools.Benotete Prüfungen sind Voraussetzung für die Zulassung zum zweiten Abschnitt der Ärztlichen Prüfung (Staatsexamen) in der Medizin. Daraus lässt sich die Notwendigkeit ableiten, qualitativ hochwertige Prüfungen zu konzipieren, die einen Leistungsvergleich unter Absolventen einer Fakultät und darüber hinaus auch interfakultär erlauben. Hierbei sind Kernqualitätsmerkmale Objektivität, Validität und Reliabilität zu beachten. Die im Leitlinienkatalog der GMA genannten Kriterien sollen die Qualität der Prüfungen sicherstellen. Das Prüfungskonzept des Lehrbereichs Allgemeinmedizin an der LMU erreichte bei Betrachtung der MC-Klausur 2008 nur 14 von 48 möglichen Kriterien. Ein fest eingeplanter Review-Prozess, stetige Weiterbildung des Prüfungsverantwortlichen und die Einführung der Prüfungsverwaltungssoftware IMSm waren Kernpunkte der Veränderung. Heute liegen die Anzahl der erreichten GMA-Kriterien bei 30. Besonders die Einführung der Prüfungsverwaltungssoftware IMSm wurde als zukunftsweisend betrachtet. Die eingebauten Review-Elemente des Systems erleichtern die Etablierung dieser Prozesse und erhöhen die Qualität der Fragen (Item-Analyse, Erkennung von Cueing und weiteren Problemen im Review-Prozess). Die aktuellen Verbesserungsmaßnahmen sind im Sinne einer Qualitätssicherung der Prüfungen als sehr positiv zu bewerten. Es erscheint erstrebenswert, den Kontakt zu Prüfungsverantwortlichen anderer Fakultäten zu suchen, um durch Vernetzung der gegenseitigen Fragepools zu profitieren