3 Jahre FacharztprüferInnen-Workshop in Südbaden - ein Projektbericht und erste Evaluationsergebnisse

Introduction: An oral exam (30-60 minutes) is administered at the end of every post-graduate medical specialty program or is required to attain additional specialized qualifications. In both undergraduate and post-graduate medical education oral exams are not considered to be very objective or reliable. To improve the quality of exams in medical specialties, the Regional Medical Association for South Baden (Bezirksärztekammer Südbaden) decided in 2013 to offer a training program for head examiners and others responsible for administering exams in medical specialties. Project Description: Following a survey of examiners and examinees conducted from January through June, 2013, on the difficulty level of examination questions, satisfaction with the test, and the need for training in administering exams, the first workshop of its kind was designed. Since 2013, six workshops with a total of 93 participants have been held and evaluated. Results: The evaluations (response rate: 86%) showed a high level of acceptance for the concept behind the training. A large number of participants felt the need to define minimum standards for exams, to standardize the required level of difficulty and the assessment criteria in each subject, and to give examiners the appropriate tools needed to improve the validity and reliability of the exams. Conclusion: Offering a training program for those responsible for administering medical specialty exams appears to be both meaningful and necessary in order to meet the existing need for increased validity and reliability. In light of the initial experiences with this workshop and the differing percentages of failed exam attempts nationwide, the implementation of examiner training is to be recommended in other regions in Germany. In other European countries examiners conducting medical specialty exams undergo appropriate training before administering their first exam.
Einleitung: Eine 30- bis 60-minütige mündliche Prüfung steht am Ende jeder Facharztweiterbildung bzw. ist für den Erwerb von Gebiets-, Schwerpunkts- und Zusatzbezeichnungen erforderlich. In der medizinischen Aus- und Weiterbildung gelten mündliche Prüfungen als wenig objektiv und reliabel. Um eine Verbesserung der Qualität von Facharztprüfungen zu erreichen, hat sich die Bezirksärztekammer Südbaden 2013 entschieden, eine Qualifizierungsmaßnahme für FacharztprüferInnen und Prüfungsvorsitzende anzubieten. Projektbeschreibung: Nach einer von Januar bis Juni 2013 durchgeführten Befragung der PrüferInnen, Prüfungsvorsitzenden und Prüflinge u.a. zum Niveau der Prüfungsfragen, zur Zufriedenheit mit der abgelaufenen Prüfung sowie zum prüfungsmethodischen Fortbildungsbedarf, erfolgte die Konzeption eines bundesweit ersten Workshop-Angebotes. Seit 2013 wurden 6 Workshops mit insgesamt 93 TeilnehmerInnen durchgeführt und evaluiert. Ergebnisse: Die Evaluationen (Rücklauf: 86%) zeigten eine hohe Akzeptanz des Schulungskonzeptes. Eine große Anzahl von TeilnehmerInnen sahen die Notwendigkeit, Minimalstandards für die Prüfungen festzulegen, das Anforderungsniveau und Bewertungskriterien in den jeweiligen Fächern zu vereinheitlichen und den FacharztprüferInnen entsprechende Instrumente an die Hand zu geben, um Validität und Reliabilität der Prüfungen zu verbessern. Schlussfolgerung: Das Angebot eines Schulungsprogramms für FacharztprüferInnen und Prüfungsvorsitzende erscheint sinnvoll und notwendig, um einem bestehenden Bedarf an mehr Validität und Reliabilität zu entsprechen. Nach den ersten Erfahrungen mit diesem Workshop-Angebot und vor dem Hintergrund der bundesweit sehr unterschiedlichen Nichtbestehensquoten wäre die Durchführung von Qualifizierungsmaßnahmen von FacharztprüferInnen auch in anderen Ärztekammerbezirken zu empfehlen. In verschiedenen europäischen Ländern durchlaufen FacharztprüferInnen bereits vor ihrem ersten Einsatz entsprechende Programme.
GMS Journal for Medical Education; 34(5):Doc55