The new final Clinical Skills examination in human medicine in Switzerland: Essential steps of exam development, implementation and evaluation, and central insights from the perspective of the national Working Group
- PMID: 26483853
- PMCID: PMC4606485
- DOI: 10.3205/zma000982
The new final Clinical Skills examination in human medicine in Switzerland: Essential steps of exam development, implementation and evaluation, and central insights from the perspective of the national Working Group
Abstract
Objective: Since 2011, the new national final examination in human medicine has been implemented in Switzerland, with a structured clinical-practical part in the OSCE format. From the perspective of the national Working Group, the current article describes the essential steps in the development, implementation and evaluation of the Federal Licensing Examination Clinical Skills (FLE CS) as well as the applied quality assurance measures. Finally, central insights gained from the last years are presented.
Methods: Based on the principles of action research, the FLE CS is in a constant state of further development. On the foundation of systematically documented experiences from previous years, in the Working Group, unresolved questions are discussed and resulting solution approaches are substantiated (planning), implemented in the examination (implementation) and subsequently evaluated (reflection). The presented results are the product of this iterative procedure.
Results: The FLE CS is created by experts from all faculties and subject areas in a multistage process. The examination is administered in German and French on a decentralised basis and consists of twelve interdisciplinary stations per candidate. As important quality assurance measures, the national Review Board (content validation) and the meetings of the standardised patient trainers (standardisation) have proven worthwhile. The statistical analyses show good measurement reliability and support the construct validity of the examination. Among the central insights of the past years, it has been established that the consistent implementation of the principles of action research contributes to the successful further development of the examination.
Conclusion: The centrally coordinated, collaborative-iterative process, incorporating experts from all faculties, makes a fundamental contribution to the quality of the FLE CS. The processes and insights presented here can be useful for others planning a similar undertaking.
Zielsetzung: Seit 2011 wird in der Schweiz eine neue nationale Schlussprüfung in Humanmedizin mit einem strukturierten klinisch-praktischen Teil im OSCE Format durchgeführt. Der vorliegende Beitrag beschreibt, aus Sicht der nationalen Arbeitsgruppe, die essentiellen Schritte der Erstellung, Durchführung und Auswertung der Eidgenössischen Prüfung Clinical Skills (EP CS) sowie der jeweils eingesetzten Qualitätssicherungsmassnahmen. Schliesslich werden zentrale Erkenntnisse der vergangenen Jahre vorgestellt. Methodik: Basierend auf den Prinzipien der Aktionsforschung wird die EP CS kontinuierlich weiter entwickelt. Auf der Grundlage systematisch dokumentierter Erfahrungen aus den Vorjahren werden in der Arbeitsgruppe anstehende Fragen diskutiert, daraus resultierende Lösungsansätze konkretisiert (Planung), in der Prüfung umgesetzt (Implementation) und anschliessend evaluiert (Reflexion). Die vorgestellten Ergebnisse sind das Produkt dieses iterativen Vorgehens. Ergebnisse: Die EP CS wird durch Fachexperten aller Fakultäten und Fachrichtungen in einem mehrstufigen Prozess erstellt. Die Prüfung wird dezentral in Deutsch und Französisch durchgeführt und besteht aus zwölf interdisziplinären Stationen pro Kandidat. Als wichtige Qualitätssicherungsmassnahmen haben sich das nationale Review Board (inhaltliche Validierung) und die Treffen der Schauspielpatienten-Trainer (Standardisierung) erwiesen. Die statistischen Auswertungen zeigen eine gute Messzuverlässigkeit und weisen auf die Konstruktvalidität der Prüfung hin. Zu den zentralen Erkenntnissen der vergangenen Jahre gehört, dass die konsequente Umsetzung der Prinzipien der Aktionsforschung zur erfolgreichen Weiterentwicklung der Prüfung beiträgt.Schlussfolgerung: Der zentral koordinierte, kollaborativ-iterative Prozess mit Einbindung von Fachexperten aus allen Fakultäten trägt wesentlich zur Qualität der EP CS bei. Die hier vorgestellten Prozesse und Erkenntnisse können für andere nützlich sein, welche Ähnliches vorhaben.
Keywords: OSCE; action research; licensing examination; national final examination; summative assessment.
Figures
References
-
- Bürgi H, Rindlisbacher B, Bader C, Bloch R, Bosman F, Gasser C, Gerke W, Humair JP, Im Hof V, Kaiser H, Lefebvre D, Schläppi P, Sottas B, Spinas GA, Stuck AE. Swiss Catalogue of Learning Objectives for Undergraduate Medical Training. Bern: Universität Bern; 2008. Available from: http://sclo.smifk.ch.
-
- Harden RM, Stevenson M, Downie WW, Wilson GM. Assessment of clinical competence using objective structured examination. Br Med J. 1975;1(5955):447–451. doi: 10.1136/bmj.1.5955.447. Available from: http://dx.doi.org/10.1136/bmj.1.5955.447. - DOI - DOI - PMC - PubMed
-
- Guttormsen S, Beyeler C, Bonvin R, Feller S, Schirlo C, Schnabel K, Schurten T, Berendonk C. The new licencing examination for human medicine: from concept to implementation. Swiss Med Wkly. 2013;143:w13897. Available from: http://www.smw.ch/content/smw-2013-13897/ - PubMed
-
- Reznick R, Smee S, Rothman A, Chalmers A, Swanson D, Dufresne L, Lacombe G, Baumber J, Poldre P, Levasseur L. An objective structured clinical examination for the licentiate: report of the pilot project of the Medical Council of Canada. Acad Med. 1992;67(8):487–494. doi: 10.1097/00001888-199208000-00001. Available from: http://dx.doi.org/10.1097/00001888-199208000-00001. - DOI - DOI - PubMed
-
- De Champlain A, Swygert K, Swanson DB, Boulet JR. Assessing the underlying structure of the United States Medical Licensing Examination Step 2 test of clinical skills using confirmatory factor analysis. Acad Med. 2006;81(10 Suppl):S17–S20. - PubMed
Publication types
MeSH terms
LinkOut - more resources
Full Text Sources
Research Materials
Miscellaneous