Elektronische Erfassung von Prüfungsleistungen bei OSCE-Prüfungen mit Tablets

Background: Objective Structured Clinical Examinations (OSCEs) often involve a considerable amount of resources in terms of materials and organization since the scores are often recorded on paper. Computer-assisted administration is an alternative with which the need for material resources can be reduced. In particular, the use of tablets seems sensible because these are easy to transport and flexible to use. Aim: User acceptance concerning the use of tablets during OSCEs has not yet been extensively investigated. The aim of this study was to evaluate tablet-based OSCEs from the perspective of the user (examiner) and the student examinee. Method: For two OSCEs in Internal Medicine at the University of Heidelberg, user acceptance was analyzed regarding tablet-based administration (satisfaction with functionality) and the subjective amount of effort as perceived by the examiners. Standardized questionnaires and semi-standardized interviews were conducted (complete survey of all participating examiners). In addition, for one OSCE, the subjective evaluation of this mode of assessment was gathered from a random sample of participating students in semi-standardized interviews. Results: Overall, the examiners were very satisfied with using tablets during the assessment. The subjective amount of effort to use the tablet was found on average to be “hardly difficult”. The examiners identified the advantages of this mode of administration as being in particular the ease of use and low rate of error. During the interviews of the examinees, acceptance for the use of tablets during the assessment was also detected. Discussion: Overall, it was found that the use of tablets during OSCEs was well accepted by both examiners and examinees. We expect that this mode of assessment also offers advantages regarding assessment documentation, use of resources, and rate of error in comparison with paper-based assessments; all of these aspects should be followed up on in further studies.
Hintergrund: OSCE-Prüfungen sind oft mit einem erheblichen Material- und Organisationsaufwand verbunden, da die Leistungserfassung üblicherweise auf Papier durchgeführt wird. Eine elektronisch unterstützte Durchführung stellt hierzu eine Alternative dar, mit der der Verbrauch materieller Ressourcen reduziert werden kann. Insbesondere erscheint hier der Einsatz von Tablets sinnvoll, da diese zudem leicht zu transportieren sind und damit flexibel eingesetzt werden können. Zielsetzung: Die Nutzerakzeptanz der Verwendung von Tablets bei OSCE-Prüfungen wurde bislang allerdings nur wenig untersucht. Ziel dieser Studie war daher eine Evaluation Tablet-basierter OSCE-Prüfungen aus Sicht der Benutzer (Prüfer) und der geprüften Studierenden. Methodik: Bei zwei OSCE-Prüfungen des Faches Innere Medizin der Universität Heidelberg wurde die Nutzerakzeptanz einer Tablet-basierten Durchführung (Zufriedenheit mit der Funktionalität) und die subjektive Anstrengung aus Sicht der Prüfer untersucht. Hierzu wurden standardisierte Fragebögen und halbstandardisierte Interviews eingesetzt (Vollerfassung aller teilnehmenden Prüfer). Zudem wurde bei einer der Prüfungen die subjektive Bewertung dieser Prüfungsvariante an einer Stichprobe teilnehmender Studierender mittels halbstandardisierter Interviews erhoben. Ergebnisse: Die Prüfer waren mit der Tablet-Prüfungsvariante insgesamt sehr zufrieden. Die subjektive Anstrengung der Bedienung der Tablets wurde im Mittel als „kaum anstrengend“ empfunden. In den Interviews wurden insbesondere die einfache Handhabung und die geringe Fehleranfälligkeit von den Prüfern als Vorteile dieser Prüfungsvariante genannt. In der Befragung der geprüften Studierenden zeigte sich ebenfalls eine Akzeptanz der Tablet-Prüfungsvariante. Diskussion: Insgesamt hat sich gezeigt, dass der Einsatz von Tablets in OSCE-Prüfungen sowohl von Prüfern als auch Studierenden gut angenommen wird. Es wird erwartet, dass diese Prüfungsvariante auch hinsichtlich Prüfungsdokumentation, Ressourceneinsatz und Fehleranfälligkeit gegenüber der papierbasierten Form Vorteile bietet, was Gegenstand weiterer Studien sein sollte.
GMS Zeitschrift für Medizinische Ausbildung; 32(4):Doc41