key: cord-0047617-y8q4pjxb
authors: Brakemeier, Eva-Lotta; Pilz, Kristin; Richter, Jan; Kaiser, Tim
title: Umsetzbarkeit und Erleben: Erste Erfahrungen mit einer Kurzform der anwendungsorientierten Parcoursprüfung im MSc-Studiengang Psychologie
date: 2020-06-12
journal: nan
DOI: 10.1159/000507820
sha: 40c169f5c7bbdbc9999b7c92943830a6f3ca0474
doc_id: 47617
cord_uid: y8q4pjxb

EINLEITUNG: Voraussetzung für die Approbation im Rahmen der neuen Psychotherapeutenausbildung ist u.a. das Bestehen einer anwendungsorientierten Parcoursprüfung. Da diese Prüfung von Lehrenden und Studierenden als Herausforderung angesehen wird, wurde eine Kurzform der Parcoursprüfung im Rahmen einer Modulprüfung des MSc-Studiengangs Psychologie eingeführt und evaluiert. METHODE: Für die 15-minütige Parcoursprüfung wurden 9 Kompe­tenzbereiche basierend auf praxisorientierten Psychotherapieseminaren entwickelt, von denen 2 jeweils geprüft wurden. Zur Standardisierung der Benotung wurde ein Bewertungsbogen konzipiert. Eine Mitarbeiterin erhielt ein Training als Simulationspatientin. Für die Evaluation wurde ein Fragebogen entwickelt, welcher u.a. die Umsetzbarkeit und das subjektive Erleben dieses Prüfungsformats aus der Sicht der an der Prüfung beteiligten Personen erfasst. ERGEBNISSE: 14 Prüfungskandidierende ließen sich durch 3 Prüfende prüfen. Die Gesamtdurchschnittsnote betrug 1,19 (Bereich: 1,0–2,3). Die Auswertung der Fragebögen zeigte, dass alle drei Gruppen die Prüfung als geeignet, die praktischen Fertigkeiten abzubilden, objektiv und praxisnah empfanden. Von den Prüfungskandidierenden gaben 50% an, dass die Prüfung sie gestresst habe, während die Simulationspatientin sich nie und die Prüfenden sich gar nicht (78%) oder kaum (22%) gestresst fühlten. DISKUSSION: Die Ergebnisse dieser Pilotstudie weisen auf eine gute Umsetzbarkeit der Parcoursprüfung hin, wenngleich sie auch mit Stress für die Prüfungskandidierenden verbunden war. Die Pilotstudie wird limitiert durch eine kleine und wahrscheinlich verzerrte Stichprobe (motivierte Studierende) ohne Vergleichsgruppe. Abschließend werden die Vor- und Nachteile dieses Prüfungsmodells kritisch diskutiert.

DOI: 10.1159/000507820 amination (OSCE) involving simulating patients. Since teachers and students regard this new format as a challenge, a short form of the OSCE was implemented in the module examination of the current master's degree in psychology and evaluated by a pilot study. Method: For the 15-min course examination, 9 areas of competences were developed based on practice-oriented psychotherapy seminars, 2 of which were tested. In order to standardize the grading, a standardized evaluation form was developed. A colleague received training to simulate a patient. For evaluation, a questionnaire was conceptualized which measured, among other things, the feasibility and subjective experiences of and during the new format as rated by the persons involved in the exam. Results: 14 examination candidates chose to be examined in this new format by 3 auditors. The overall averaged grade was 1.19 (range: 1.0-3). The evaluation of the questionnaire showed that all three groups rated the exam to be suitable for displaying practical skills, objective and close to the practical application. Of the examination candidates, 50% reported feelings of stress, while the simulating patient never and the auditors did not at all (78%) or rarely felt stressed (22%) during the different examinations. Discussion: Overall, the results of this pilot study indicate a good feasibility of the OSCE, although the examination candidates rated it to be stressful at the same time. The pilot study is limited by the small and probably biased sample (motivated students) without a comparison group. To conclude, pros and cons of this examination format will be critically discussed. © 2020 The Author(s)

Das Gesetz zur Reform der Psychotherapeutenausbildung vom 15. November 2019 [BGBl I, S. 1604] hat die Ausbildung, die zum Beruf des/der PsychotherapeutIn führt, grundlegend reformiert und auf eine neue Rechtsgrundlage gestellt. Anders als bisher wird die Approbation als PsychotherapeutIn künftig nicht mehr nach einer postgradualen Ausbildung erteilt, sondern nach dem erfolgreichen Abschluss eines Bachelor-und eines Masterstudiums sowie dem Bestehen der psychotherapeutischen Prüfung vergeben. Am 14. Februar 2020 hat der deutsche Bundesrat der für das Gesetz notwendigen und vom Bundesministerium für Gesundheit [2019] erlassenen Approbationsordnung für PsychotherapeutInnen (Psych ThApprO) zugestimmt. Die finale Version der Psych ThApprO wurde am 4. März 2020 veröffentlicht [Bundesgesetzblatt, 2020] . Durch diese Gesetzesänderung werden nicht nur neue Formate der praktischen Lehre in die Hochschullehre integriert, sondern sie erfordert gleichsam neue Prüfungsformate. Im Unterabschnitt 3 der Approbationsordnung wird die sogenannte anwendungsorientierte Parcoursprüfung als Teil der staatlichen Approbationsprüfung beschrieben [Bundesgesetzblatt, 2020] . Diese strukturierte klinisch-praktische Prüfung wurde nach Vorbild des internationalen Prüfungsformats "Objective Structured Clinical Examination" (OSCE) [Harden et al., 1975] entworfen, welches in der Medizin mittlerweile als anerkannter Standard zur Erfassung klinischer Kompetenzen gilt [Turner und Dankoski, 2008; Vaidya und Ramchandani, 2008; Chisnall et al., 2015] . Die medizinische OSCE-Prüfung beinhaltet verschiedene Stationen, welche die Prüfungskandidierenden in strukturierter Weise durchlaufen, um sowohl theoretisches als auch prozedurales Wissen zu testen. Die Bewertungen erfolgen durch eine standardisierte, vorher definierte Checkliste, um die Objektivität der Prüfung zu gewährleisten. Dieser bereits etablierte Ansatz für das Assessment klinischer Kompetenzen in der Medizin soll nun mittels der in der PsychThApprO beschriebenen Parcoursprüfung auch in der Psychologie zur Anwendung kommen. In der PsychThApprO wurde festgelegt, dass der praktische Parcours aus 5 Stationen (zu 30 min) bestehen wird, bei denen jeweils geschulte Simulations-patientInnen eingesetzt werden. Die Prüfungskandidierenden durchlaufen die Stationen in Fünfergruppen. [Chenot und Erhardt, 2003] . Entscheidend für die Reliabilität sind die Anzahl der Stationen, Konsistenz zwischen den Bewertungen der Prüfenden sowie das Festsetzen einer Bestehensgrenze [Chenot und Erhardt, 2003] . Diese Aspekte wurden bei der Konzeption der in der PsychThApprO beschriebenen Parcoursprüfung berücksichtigt (siehe oben). Ferner soll die Objektivität von OSCE-Prüfungen mittels Bewertungsbögen gesichert werden, was ebenfalls für die psychotherapeutische Parcoursprüfung festgelegt wurde. Schließlich weisen OSCE-Prüfungen eine hohe Augenscheinvalidität auf [Chenot und Erhardt, 2003 ] -ein Anspruch, den die neue Parcoursprüfung ebenfalls erfüllen sollte.

Diese Prüfungsform wird von vielen in der Hochschullehre tätigen KollegInnen der klinischen Psychologie und Psychotherapie als eine große zukünftige Herausforderung angesehen [vgl. Wilhelm et al., in diesem Themenheft] . Im persönlichen Austausch über die zu erwartenden praktischen Prüfungsanteile wurde auch bei einem Teil der Studierenden ein großer Respekt bis Unbehagen spürbar. Auch wenn aktuelle politische Diskussionen nahe legen, dass die Durchführung der Approbationsprüfung an das Institut für medizinische und pharmazeutische Prüfungsfragen [IMPP, https://www.impp. de/start.html] delegiert werden könnte, wird es unabhängig von der Durchführung dieser praktischen Prüfungsformate für die Universitäten relevant sein, die Studierenden bereits während des zur Approbation führenden Masterstudiengangs "Klinische Psychologie und Psychotherapie" auf dieses neue Prüfungsformat vorzubereiten. Eine Möglichkeit wäre, bereits einzelne Module des Masterstudienganges durch vergleichbare anwendungsorien-tierte Formate zu prüfen. Dies bietet sich insbesondere für folgende Inhalte an, die in der PsychThApprO für den Masterstudiengang im Rahmen der hochschulischen Lehre festgehalten werden (vgl. Anlage 2 der PsychThApprO): spezielle Störungs-und Verfahrenslehre der Psychotherapie, angewandte Psychotherapie, vertiefte psychologische Diagnostik und Begutachtung.

Um erste Erfahrungen mit einem solchen neuen Prüfungsformat zu gewinnen, wurde den Studierenden des bestehenden Studienganges MSc Psychologie an der Universität Greifswald im Wintersemester 2019/2020 für das Modul "Klinische Psychologie und Psychotherapie" erstmalig eine Kurzversion der anwendungsorientierten Parcoursprüfung als Alternative zur klassischen mündlichen Prüfung angeboten. Dabei verfolgten wir das Ziel zu prüfen, inwiefern sich die im Gesetz formulierten Anforderungen an die anwendungsorientierte Parcoursprüfung in einem Kurzformat als Modulprüfung in einem MSc-Studiengang Psychologie umsetzen lassen. Hierfür evaluierten wir das Prüfungsformat und untersuchten systematisch, wie die Prüfungskandidierenden, das prüfende Lehrpersonal und die Simulationspatientin diese Form der Prüfung erlebten und deren Durchführbarkeit beurteilten.

Im Modul B "Klinische Psychologie und Psychotherapie" des bestehenden MSc-Studiengangs Psychologie an der Universität Greifswald wurden im vergangenen Wintersemester 2019/20 vier praxisnahe klinische Seminare angeboten. Aufgrund der implementierten Lehre zu psychotherapeutischen Praktiken eignete sich diese Modulprüfung dazu, erstmalig das neue Prüfungsformat anzubieten. Teil 2: Anwendungsorientierte Parcoursprüfung (15 min) Die anwendungsorientierte Parcoursprüfung wurde mit Hilfe von einer Schauspielpatientin durchgeführt, die zuvor für die Prüfung geschult worden war. Sie spielte jeweils PatientInnen, welche die typische, in den Seminaren behandelte Symptomatik aufwiesen. In der Tabelle 2 finden sich die 9 Kompetenzbereiche, in denen die Prüfung erfolgen konnte. Ihre Auswahl beruhte auf den Kompetenzbereichen, welche in den 4 Basis-Seminaren vorgestellt und geübt worden waren. Die oder der Studierende konnte vor der Prüfung der oder dem 1. PrüferIn 3 Kompetenzbereiche angeben, welche mindestens 2 der 4 Seminare abdecken sollten. Von diesen 3 Kompetenzbereichen wurden durch die Prüfenden 1-2 Bereiche zur Prüfung ausgewählt.

Zur Durchführung der Kompetenzbereiche 2-5 standen in der Prüfung die benötigten Arbeitsblätter zur Verfügung, die von den Prüfungskandidierenden verwendet werden sollten. Bei den Kompetenzbereichen 7-9 konnten folgende 4 schwierige interpersonelle Situationen in der Prüfung vorkommen, basierend auf den Patientenbeispielen, welche im Seminar behandelt wurden [vgl. Brakemeier, 2019] . Die Prüfungskandidierenden konnten bis 1 Woche vor der Prüfung zwei Situationen auswählen, von denen eine in der Prüfung dargestellt wurde: Um zu untersuchen, wie die Prüfungskandidierenden, die Prüfenden und die Simulationspatientin diese Art der Prüfung erlebten und deren Umsetzbarkeit beurteilten, entwickelten wir einen Evaluationsfragebogen. Da unseres Wissens nach kein validierter, allgemein anerkannter Fragebogen zur Evaluation derartiger Parcoursprüfungen vorliegt, haben wir bewährte Items eines Fragebogens, der bei OSCE-Evaluationen der Universitätsmedizin Greifswald eingesetzt wird, übernommen und weitere uns interessierende Items hinzugefügt. Der daraus resultierende "Fragebogen zur Evaluation einer Kurzform der anwendungsorientierten Parcoursprüfung" (Akronym: FEKaP) liegt in 3 Versionen vor, da uns die Sicht der Prüfungskandidierenden (FEKaP-Pk), der Prüfenden (FEKaP-P) sowie der/des Simulationspatien-tIn (FEKaP-S) in jeder Prüfung interessierte.

Ein Item des FEKaP-Pk lautet beispielsweise: "Die Prüfung war geeignet, meine erworbenen praktischen Fertigkeiten aus den Seminaren abzubilden." Die Items konnten auf einer 5-stufigen Likert-Skala beantwortet werden (von 1 "stimme nicht zu" bis 5 "stimme zu").

Alle drei Varianten des Fragebogens befinden sich im Online-Supplementmaterial 2.

Die Prüfungskandidierenden wurden jeweils nach ihrer Prüfung und Notenbekanntgabe über die Evaluation informiert und um Teilnahme gebeten. Dabei wurde ihnen versichert, dass die Evaluation auf freiwilliger Basis erfolgt und anonymisiert ausgewertet wird (vgl. Seite 1 des FEKaP-S). Die Prüfenden und die Simulationspatientin waren durch die Entwicklung mit der Evaluation vertraut. Die Studie wurde gemäß der allgemeinen ethischen Richtlinien (z.B. nach der Deklaration von Helsinki) durchgeführt.

Zu den Prüfungen, welche am 11. und 12. Februar 2020 im psychologischen Institut der Universität Greifswald stattfanden, meldeten sich 18 Studierende an. Von diesen Studierenden erschienen 14 zu den Prüfungen, da es 4 Krankmeldungen gab, von denen 2 die traditionelle Variante gewählt hatten. Alle 14 Prüfungskandidieren-den, die zur Prüfung erschienen, hatten die neue Prüfungsform gewählt. Die Prüfungen wurden jeweils in wechselnden Paaren von den Autoren E.-L.B., T.K. und J.R. durchgeführt, wobei eine bzw. einer von beiden den Prüfungsvorsitz innehatte. Die Autorin K.P. übernahm die Rolle der Simulationspatientin in allen Prüfungen.

Für jede Prüfung wurden 30 min eingeplant, welche wie folgt aufgeteilt werden sollten: 10 min Teil 1, 15 min Teil 2 sowie 5 min Nachbesprechung der Prüfenden einschließlich Mitteilung der Note an den geprüften Studierenden.

Um eine möglichst standardisierte und objektive Bewertung und Benotung vornehmen zu können, wurden für jeden zu prüfenden praktischen Kompetenzbereich zuvor ein ähnlich der in der PsychThApprO beschriebener strukturierter Bewertungsbogen konzipiert, welcher eine Musterlösung mit gewichteten Leistungsmerkmalen, eine sich daraus ergebende Checkliste für jedes Leistungsmerkmal mit aufgabenspezifischen Einzelkriterien sowie die für jedes Leistungsmerkmal höchstmögliche Punktzahl enthält. Die Tabelle 3 gibt Ausschnitte dieser Bewertungsbögen wieder. In gesamtem Umfang befinden sie sich im Online-Supplementmaterial 3.

Da die Prüfenden (E.-L.B., T.K., J.R.) auch bei 3 der 4 Basisseminare selbst die Lehrenden waren, war mindestens eine bzw. einer mit den Kompetenzbereichen ausführlich vertraut. Die oder der jeweils andere Prüfende wurde durch Lektüre der Seminarunterlagen, einer mündlichen Erläuterung der Kompetenzbereiche durch den Lehrenden sowie die Bewertungsbögen auf die Prüfung der jeweils anderen Kompetenzbereiche vorbereitet. Der Lehrende des Seminars Zwangsstörungen konnte bei der Prüfung nicht anwesend sein und übergab daher die Seminarinhalte durch das Übersenden des Seminarablaufs und schickte Prüfungsfragen für den Teil 1 der Prüfung. Die in diesem Seminar vermittelte Basistechnik der Verhaltenstherapie -Exposition mit Reaktionsverhinderung -wurde vergleichbar unterrichtet wie im Seminar zum Unified Protocol. Daher konnte auch die Prüfung des in diesem Seminar gelehrten Kompetenzbereiches durch die anderen Lehrenden durchgeführt werden.

Aufgrund der überschaubaren Anzahl an Prüfungsanmeldungen und des Ziels der möglichst hohen Standardisierung wurde nur eine Simulationspatientin 

Die Kompetenzbereiche 2, 3, 5 und 7 wurden von den Prüfungskandidierenden am häufigsten gewählt, die beiden Kompetenzbereiche 1 und 9 wurden nie gewählt. Bei der Auswahl der Kompetenzbereiche durch die Prüfenden wurde darauf geachtet, dass möglichst alle gewählten Kompetenzbereiche abwechselnd geprüft wurden, sodass in den 14 Prüfungen entsprechend alle Bereiche bis auf 1 und 9 auch geprüft wurden.

Die Prüfenden waren angehalten, Teil 1 und Teil 2 der Prüfungen separat zu benoten, wobei der Teil 2 aufgrund der zeitlichen Schwerpunktsetzung in der Prüfung mit doppelter Gewichtung in die Gesamtnote einfloss. Ihnen stand die übliche Notenskalierung (1,0, 1,3, 1,7, 2,0 usw.) zur Verfügung. Im Durchschnitt wurde der Teil 1 mit der Note 1,43 (Median = 1,0; Bereich: 1,0-3,0) benotet und der Teil 2 mit der Note 1,12 (Median = 1,0; Bereich: 1,0-2,0). Die Gesamtdurchschnittsnote betrug 1,19 (Median = 1,0; Bereich: 1,0-2,3).

12 der 14 zu prüfenden Studierenden nahmen an der Evaluation teil und beantworteten den FEKaP-Pk. Zudem liegen die Evaluationsbögen pro Prüfung aus Sicht der Prüfenden (28 ausgefüllte FEKaP-P von den beiden Prüfenden aus 14 Prüfungen) sowie aus Sicht der Simulationspatientin (14 ausgefüllte FEKaP-S) vollständig vor.

In der Abbildung 1 sind die Einschätzungen des FEKaP-Pk durch die prozentuelle Darstellung der Häufigkeiten der 5 Antwortkategorien pro Item dargestellt. Im Folgenden werden jeweils die Mittelwerte einschließlich der Standardabweichungen der wichtigsten Items zusammengefasst.

Es wird deutlich, dass das Prüfungsformat von den Prüfungskandidierenden als sehr geeignet erlebt wurde, die in den Seminaren erworbenen praktischen Fertigkeiten abzubilden (Item 4, M1 = 4,92 ± 0,29). Hier fiel der Mittelwert höher aus als bei der Einschätzung, ob die Prüfung geeignet war, das erworbene Wissen aus den Seminaren abzubilden (Item 3, M = 4,58 ± 0,67). Zudem wurde die Prüfung mehrheitlich als objektiv erlebt (Item 5, M = 4,75 ± 0,62) und die Fragen als eindeutig und verständlich formuliert (Item 9, M = 4,67 ± 0,49). Die Prüfung hat sowohl einen mittelstarken Stress (Item 7, M = 3,58 ± 1,16) als auch recht viel Spaß (Item 8, M = 4,25 ± 0,87) ausgelöst. Der Aufwand zur Vorbereitung der Prüfung erschien den Prüfungskandidierenden angemessen (Item 10, M = 4,67 ± 0,49). Auch der Aussage, dass "durch die Vorbereitung auf diese Prüfung das Interesse und die Begeisterung für das Fach klinische Psychologie und Psychotherapie zugenommen hat", stimmten die Studierenden mehrheitlich zu (Item 11, M = 4,58 ± 0,62). Schließlich half die Vorbereitung auf die Prüfung den meisten Prüfungskandidierenden bei der Entscheidung, ob sie die Ausbildung zum psychologischen Psychotherapeuten nach dem Studium absolvieren (Item 12, M = 4,17 ± 1,19). 5 von 12 der Prüfungskandidierenden gaben an, bereits entschieden zu haben, die Ausbildung zum/zur psychologischen PsychotherapeutIn nach dem Studium zu beginnen (5 unklar, 2 nein).

In der Abbildung 2 sind die Einschätzungen des FEKaP-P durch die prozentuelle Darstellung der Häufigkeiten der 5 Antwortkategorien pro Item abgebildet. Im Folgenden werden erneut jeweils die Mittelwerte einschließlich der Standardabweichungen der wichtigsten Items zusammengefasst.

Auch die Prüfenden gaben im Durchschnitt aller durchgeführten Prüfungen an, dass sie dieses Prüfungsformat als sehr geeignet empfanden, die in den Seminaren erworbenen praktischen Fertigkeiten abzubilden (Item A4, M = 4,93 ± 0,26). Hier fiel der Mittelwert ebenfalls höher aus als Verhaltenstherapie 2020;30:141-155 DOI: 10.1159/000507820 bei der Frage, ob die Prüfung geeignet war, das erworbene Wissen aus den Seminaren abzubilden (Item A3, M = 4,39 ± 0,57). Zudem erschien die Prüfung den Prüfenden vom Schwierigkeitsgrad her angemessen (Item A5, M = 4,82 ± 0,39) und praxisnah (Item A6, M = 4,89 ± 0,31). Die Prüfenden stimmten den Aussagen, dass sie objektiv über die Prüfungsleistung urteilen sowie eine standardisierte Bewertung abgeben konnten, eher zu (Item P1, M = 4, 36 ± 0, 56; Item P4, M = 4, 43 ± 0, 50) . Sie empfanden die Prüfung als sehr fair (Item P2, M = 4,86 ± 0,36) und gaben an, die Prüfungsfragen eindeutig und verständlich formuliert haben zu können (Item P3, M = 4,71 ± 0,46). Die Prüfenden gaben an, sich eher nicht gestresst (Item P5, M = 1,21 ± 0,42) und von der Durchführung nicht überfordert (Item P6, M = 1,07 ± 0,26) gefühlt zu haben. Insgesamt gaben sie an, Spaß an der Prüfung erlebt zu haben (Item P7, M = 4,57 ± 0,57). Die Prüfungskandidierenden haben sie im Durchschnitt eher nicht nervös (Item S1, M = 2,39 ± 1,03), eher nicht gestresst (Item S4, M = 2,43 ± 1,20) und nicht von der Prüfungssituation überfordert (Item S5, M = 1,50 ± 0,84) erlebt. Sie stimmten eher zu, dass die Prüfungskandidierenden Spaß an der Prüfung hatten (Item S6, M = 3,71 ± 0,90) und sehr zu, dass sie an den geprüften Lehrinhalten interessiert wirkten (Item S7, M = 4,57 ± 0,57). Insgesamt erschienen die Prüfungskandidierenden für die Arbeit als Psychologische(r) PsychotherapeutIn den Prüfenden geeignet (Item S8, M = 4,50 ± 0,75). Die Prüfenden stimmten der Aussage zu, dass die Prüfungskandidierenden im Umgang mit der Simulationspatientin authentisch wirkten (Item M1, M = 4,54 ± 0,69), und stimmten eher zu, dass die Prüfungskandidierenden sich auf die dargestellten Rollenspielsituationen einlassen konnten (Item M2, M = 4,46 ± 0,79). Die Simulationspatientin schätzten sie im Umgang mit dem Prüfungskandidierenden als sehr authentisch ein (Item M3, M = 4,93 ± 0,26) und stimmten zu, dass sie realistische Fälle gespielt hat (Item M4, M = 4,89 ± 0,42). Schließlich stimmten sie zu, dass der Schwierigkeitsgrad der dargestellten Situation für die Prüfung angemessen (Item M5, M = 4,93 ± 0,26) und nah am therapeutischen Alltag (Item M6, M = 4,68 ± 0,61) war. Die mittlere Intraklassen-Korrelation zwischen den Prüfenden bezogen auf alle Items betrug ICC(C,1) = 0,88.

Die Abbildung 3 visualisiert schließlich die Einschätzungen des FEKaP-S durch die prozentuelle Darstellung der Häufigkeiten der 5 Antwortkategorien pro Item. Im Folgenden werden jeweils die Mittelwerte einschließlich der Standardabweichungen der wichtigsten Items zusammengefasst.

Die Simulationspatientin gab in allen durchgeführten Prüfungen an, dass sie dieses Prüfungsformat als sehr geeignet empfand, die praktischen Fertigkeiten abzubilden (Item A1, M = 5,00 ± 0,00). Zudem erschien ihr die Prüfung eindeutig praxisnah (Item A2, M = 5,00 ± 0,00). Sie stimmte zu, dass sie die Schwierigkeit der von ihr dargestellten Situationen als angemessen empfand (Item P1, M = 5,00 ± 0,00) und in ihren Rollen authentisch mit den Prüfungskandidierenden umgehen konnte (Item P2, M = 5,00 ± 0,00). Die Simulationspatientin gab an, sich nicht gestresst gefühlt zu haben (Item P3, M = 1,21 ± 0,43). Insgesamt schien sie Spaß in den Prüfungen erlebt zu haben (Item P4, M = 4,50 ± 0,65). Sie fühlte sich auf die Prüfungen durchweg gut vorbereitet (Item P5, M = 5,00 ± Abb. 2. Prozentuelle Darstellung der Häufigkeiten der 5 Antwortkategorien pro Item des FEKaP-P (Fragebogen zur Evaluation einer Kurzform der anwendungsorientierten Parcoursprüfung -Version Prüfende), n = 28. Verhaltenstherapie 2020;30:141-155 DOI: 10.1159/000507820 0,00) und stimmte der Einschätzung eher nicht zu, mit der Vorbereitung auf die Prüfung viel Aufwand gehabt zu haben (Item P6, M = 2,00 ± 0,00). Für ihre Leistungen fühlt sie sich angemessen entlohnt (Item P4, M = 5,00 ± 0,00). Die Prüfungskandidierenden hat sie im Durchschnitt eher nicht nervös (Item S1, M = 1,86 ± 1,03), eher nicht gestresst (Item S3, M = 1,71 ± 0,91) und nicht von der Prüfungssituation überfordert (Item S4, M = 1,36 ± 0,74) erlebt. Sie stimmte zu, dass die Prüfungskandidierenden im Umgang mit ihr authentisch wirkten (Item S2, M = 4,50 ± 0,52). Sie stimmte eher zu, dass die Prüfungskandidierenden Spaß an der Prüfung hatten (Item S5, M = 4,00 ± 0,68), und sehr zu, dass sie an den geprüften Lehrinhalten interessiert wirkten (Item S6, M = 4,64 ± 0,63) sowie sich auf die dargestellten Situationen als Therapierende einlassen konnten (Item S7, M = 4,71 ± 0,61). Insgesamt erschienen der Simulationspatientin die Prü-fungskandidierenden für die Arbeit als psychologische(r) PsychotherapeutIn geeignet (Item S8, M = 4,50 ± 0,65). Schließlich stimmte die Simulationspatientin der Aussage zu, dass die dargestellten Situationen nah am therapeutischen Alltag waren (Item M1, M = 5,00 ± 0,00).

Die wenigen Antworten auf die offenen Fragen der drei Fragebögen können im Online-Supplementmaterial 4 eingesehen werden, wobei die wichtigsten Aspekte in die folgende Diskussion integriert wurden.

In diesem Artikel wurden eine Kurzform der in der neuen PsychThApprO festgelegten anwendungsorientierten Parcoursform skizziert, die erste Durchführung beschrieben sowie die Ergebnisse eine Evaluation dargestellt. DOI: 10.1159/000507820

Vergleich zwischen der neu konzipierten Kurzform mit der in der PsychThApprO beschriebenen Parcoursprüfung Im Folgenden soll zunächst ein Vergleich zwischen der neu konzipierten Kurzform mit der in der PsychThApprO beschriebenen Parcoursprüfung erfolgen. Insgesamt finden sich viele Übereinstimmungen der beiden Formate: Wie im Gesetzestext beschrieben, sind in der von uns entwickelten Kurzform ebenfalls einzelne Kompetenzbereiche auf Basis strukturierter Bewertungsbögen geprüft worden. Die Prüfungsaufgaben beinhalteten zum einen eine kurze Beschreibung der Patientensituation, Angaben hinsichtlich zugelassener Hilfsmittel sowie eine Rollenbeschreibung für die/den Simulations-patientIn bezüglich der im Seminar behandelten Fälle. Hiermit gleicht die von uns konzipierte neue Prüfung den Vorgaben im Gesetz. In der Musterlösung für die Bewertung (siehe oben) waren, wie in der PschThApprO gefordert, die gewichteten Leistungsmerkmale inklusive aufgabenspezifischer Einzelkriterien enthalten, für welche wir eine höchstmögliche Punktzahl definiert haben. Des Weiteren entsprechen sich die Formate bezüglich der Schulung der SimulationspatientInnen, welche wir im Rahmen der Vorbereitung durchgeführt haben. In unserem Fall entfielen jedoch größtenteils die beschriebene Schulung sowie die Instruktionen für die Prüfenden, da diese als Lehrende der geprüften Seminare bereits mit den Kompetenzbereichen und den erwarteten Lösungen vertraut waren. Es erfolgte jedoch unter den 3 Prüfenden eine genaue Beschreibung der jeweils relevanten Seminarinhalte und entsprechenden Kompetenzbereiche.

Insgesamt kann festgehalten werden, dass die neu konzipierte Kurzform einer Parcoursprüfung weitgehend den Kriterien der in der PsychThApprO beschriebenen Parcoursprüfung entspricht, wobei der zeitliche Umfang deutlich geringer ausfiel und sich die geprüften Kompetenzbereiche inhaltlich teilweise deutlich unterscheiden. Nur die hier geprüften Kompetenzbereiche 7-9 scheinen in etwa dem in der PsychThApprO beschriebenen Kompetenzbereich 2 (therapeutische Beziehungsgestaltung) zu entsprechen, da hier die Prüfungskandidierenden ebenfalls zu zeigen haben, dass sie Probleme in der therapeutischen Beziehungsgestaltung erkennen und diesen Problemen in geeigneter Form begegnen können [vgl. Bundesgesetzblatt, 2020, § 48 Absatz 3] . Zudem erscheinen gewisse Überschneidungen zwischen dem hier geprüften Kompetenzbereich 1 und dem in der PsychThApprO vorgesehenen Bereich 5 (leitlinienorientierte Behandlungsempfehlungen), in welchem die Prüfungskandidierenden zu zeigen haben, dass sie die PatientInnen angemessen und diagnosebezogen über empfohlene Behandlungsmöglichkeiten informieren. Nicht einbezogen wurde hier die Kompetenz, dabei auch solche Behandlungsmöglichkeiten einzubeziehen, die außerhalb des eigenen Spezialisierungsbereichs liegen [vgl. Bundesgesetzblatt, 2020, § 48 Absatz 6] . Ansonsten wurden in unserer kurzen Parcoursprüfung entsprechend des bestehenden Moduls die Basistechniken der Verhaltenstherapie und moderner Psychotherapiemethoden geprüft, während in der PsychThApprO durch die 5 Stationen verfahrensübergreifende Kompetenzen der Psychotherapie adressiert werden.

Abschließend soll eine Einschätzung der Gütekriterien, welche für die medizinischen OSCE-Prüfungen formuliert wurden [vgl. Einleitung; Chenot und Erhardt, 2003] , für unser Prüfungsformat erfolgen: Die geforderte Objektivität haben wir durch die entwickelten Bewertungsbögen zu sichern versucht. Die Evaluation weist jedoch auf Optimierungsbedarf hin, da die Prüfenden den Aussagen, dass sie objektiv über die Prüfungsleistung urteilen sowie eine standardisierte Bewertung abgeben konnten, im Durchschnitt nur "eher zustimmten" (statt "zustimmten"). Die zu Prüfenden gaben hingegen mehrheitlich an, die Prüfung als objektiv erlebt zu haben, wobei diese Ergebnisse unter der Limitation interpretiert werden müssen, dass Abhängigkeitsverhältnisse (evaluierende Wissenschaft-lerInnen sind die Lehrenden/Bewertenden) zu einer positiveren Bewertung geführt haben könnten. Die Konsistenz zwischen den Bewertungen der Prüfenden sowie das Festsetzen einer Bestehensgrenze weist auf eine hohe Reliabilität hin, welche jedoch durch die hier eröffnete Wahlmöglichkeit der Kompetenzbereiche (1-2 von 9) gemindert wird. Die durch das praktische Parcoursprüfungsformat augenscheinlich hohe Validität wird durch die Evaluation untermauert, da hier alle an der Prüfung beteiligten Personen übereinstimmend angaben, dass die Prüfung die in den Seminaren erworbenen praktischen Fertigkeiten sehr gut abbildet und die im Rollenspiel aktiven Personen (Prüfungskandidierende und Simulationspatientin) authentisch wirkten. In zukünftigen Studien sollten die drei Gütekriterien durch Evaluationen unabhängiger Wissenschaftler erfasst werden.

Bezüglich des ersten Prüfungsdurchlaufs sind folgende Lernerfahrungen gemacht worden: Viele strukturelle und organisatorische Aspekte konnten gut umgesetzt werden. Dabei haben sich insbesondere die schriftlichen Dokumente (speziell das Informationsblatt, vgl. Online-Supplementmaterial 1) als hilfreich für die Vorbereitung und Orientierung der Prüfungskandidierenden sowie zusätzlich zur Standardisierung für die Prüfenden und die Simulationspatientin erwiesen. Für die Simulationspatientin stellten die Lehrvideos [Barlow und Farchione, 2018 ; https://www.youtube.com/channel/ UC3Q9uoV1XPVzY_Q9cUgiiTg; Brakemeier, 2019] samt Erläuterungen der Seminarleiter bei der Vorbereitung auf die entsprechenden Kompetenzbereiche wert-

Applications of the unified protocol for transdiagnostic treatment of emotional disorders

Schwierige Situationen in der modernen Psychotherapie

Teil I Nr. 11, ausgegeben zu Bonn am 12. März 2020. Bundesministerium für Gesundheit: Entwurf einer Approbationsordnung für Psychotherapeutinnen und Psychotherapeuten

Objective structured clinical examination (OSCE) in der medizinischen Ausbildung: Eine Alternative zur Klausur

Evaluation of outcomes of a formative objective structured clinical examination for second-year UK medical students

Assessment of clinical competence using objective structured examination

Selbstmanagement-Therapie

The use of video in standardized patient training to improve portrayal accuracy: A randomized post-test control group study

Objective structured clinical exams: a critical review

Psychiatry clerkship objective structured clinical examination is here to stay

Studium zur Psychotherapie-Approbation als Herausforderung und Chance: Praktische Hochschullehrerkonzepte in der klinischen Psychologie und Psychotherapie. Verhaltenstherapie

Verhaltenstherapie 2020;30:141-155 DOI: 10.1159/000507820 volle Hilfen dar. Entsprechend dieser Erfahrung zeigen auch Studien, dass Lehrvideos nachgewiesenermaßen eine akkuratere Performance von SimulationspatientInnen gewährleisten [Schlegel et al., 2015] .Insgesamt ergab die Durchführung dieser Prüfung einen relativ hohen organisatorischen Aufwand, welcher im Voraus berücksichtigt werden sollte. Dieser ist in unserem Falle jedoch vermutlich der recht kurzfristigen Einführung des neuen Prüfungsformates (einschließlich der Erstellung der Materialien und der Fragebögen) geschuldet und könnte bei ausreichendem Vorlauf und gewonnener Routine erheblich reduziert werden. Als weiterer Aspekt wurde bei der Durchführung bezüglich des veranschlagten Zeitrahmens (insgesamt 30 min pro Prüfungskandidierenden) deutlich, dass die 5 vorgesehenen Minuten zur Nachbesprechung der Prüfenden einschließlich der Mitteilung der Note an den Prüfungskandidierenden nicht ausreichten. Aufgrund dessen kam es zu Verzögerungen im zeitlichen Ablauf der Prüfungen. Daher empfehlen wir einen längeren Zeitraum für die Nachbesprechung einschließlich der Notenmitteilung von bis zu 15 min. Dies würde auch ermöglichen, dass bei divergierenden Meinungen zur Ausführung der Rollenspiele bzw. der Notenvergabe ausreichend Zeit zur Diskussion zur Verfügung steht sowie mit Ruhe dem Prüfungskandidierenden die Notenvergabe erläutert werden kann. Damit Prüfende von der Prüfung auch langfristig profitieren, sollte es insbesondere bei schlechteren Noten ausreichend Zeit geben, auf die Defizite hinzuweisen und gleichzeitig die Stärken oder Bemühungen zu loben. Daher erscheint es empfehlenswert, diese Prüfungen alle 45 min zu terminieren.

Bei der Notenvergabe zeigte sich, dass der Durchschnitt mit 1,19 (Standardabweichung = 0,38, Median = 1, Bereich: 1-2,3) insgesamt hoch lag und wenig zwischen den Prüfungen differenzierte. Hier wäre zu überlegen, ob in folgenden Parcoursprüfungen der Schwierigkeitsgrad eventuell angepasst werden sollte. Auf Basis der zur Verfügung stehenden Materialen konnten die Prüfungskandidaten sich sehr gezielt auf die Prüfung vorbereiten. Insbesondere die Lehrvideos zu den Kompetenzbereichen 7-9 ermöglichten Imitationslernen. Um den Schwierigkeitsgrad etwas anzuheben, könnten beispielsweise die SimulationspatientInnen komplexere oder weniger aus den Seminaren bekannte Fälle spielen.

Die Evaluation ermöglicht den Vergleich der drei Perspektiven: Alle drei Gruppen gaben nahezu gleichermassen an, dass sie das neue Prüfungsformat für geeignet hal-ten, praktische Fertigkeiten der Studierenden abzubilden und die gesamte Prüfung praxisnah, angemessen schwierig und fair empfanden.Unterschiede wurden bei der Einschätzung im Selbsterleben der Prüfung deutlich, da sich Studierende augenscheinlich gestresster fühlten als Prüfende und die Schauspielpatientin, wobei hier auch ein Unterschied im Selbstund Fremdurteil zu beobachten ist: Die Prüfenden und die Simulationspatientin empfanden die Studierenden weniger gestresst, als sie sich selbst einstuften. Beim erlebten Spaß ist das Bild einheitlicher: Allen schien die Prüfung überwiegend Spaß gemacht zu haben. Hier stimmte Selbst-und Fremdbeurteilung nahezu überein.

Als wichtige Limitation ist die selektive Stichprobe (positive Consumer) anzusehen, da am neuen Prüfungsformat vermutlich überwiegend hoch motivierte und leistungsstarke Psychologiestudierende teilgenommen haben. Diese Selektion ergibt sich dadurch, dass diese Prüfung auch nach dem Sommersemester 2020 abgelegt werden kann, sodass sich in diesem Semester vermutlich vor allem jene Prüfungskandidierende angemeldet haben, welche sich das neue Format definitiv zugetraut haben. Insofern ist anzunehmen, dass die Evaluation entsprechend positiver ausgefallen ist. Des Weiteren haben sich -eventuell aus denselben Gründen -nur 2 Prüfungskandidierende für das klassische Format angemeldet, von denen beide sich aufgrund von Krankheit wieder abgemeldet hatten. Entsprechend fehlt für diese Pilotevaluation eine Kontroll-bzw. Vergleichsgruppe für einen direkten Vergleich des alten und neuen Formates. Zusätzlich ist als Limitation anzusehen, dass die evaluierenden Prüfenden das Prüfungsformat selbst konzipiert haben, weswegen ein Forscher Allegiance-Effekt zugunsten des neuen Formates nicht auszuschließen ist. Außerdem ist als Limitation zu nennen, dass der Evaluationsfragebogen (FEKaP) selbst konstruiert wurde und aufgrund der kurzfristigen Einführung nicht validiert werden konnte. Deckeneffekte weisen darauf hin, dass die Items vom Schwierigkeitsgrad zu einfach sind und nicht gut differenzieren. Sozial erwünschte Antworten sind nicht auszuschließen. Schließlich konnten durch diese Prüfung nur die Kompetenzbereiche geprüft werden, welche auch zuvor in den Seminaren behandelt wurden, weshalb psychodynamische oder systemische Kompetenzen nicht adressiert werden konnten.

Diese Pilotstudie weist darauf hin, dass das neue Prüfungsformat von den Beteiligten gut akzeptiert wird und sich sowohl organisatorisch gut durchführen lässt als Brakemeier auch die erlernten Fertigkeiten angemessen abbilden kann. Insbesondere der letzte Aspekt wird von den Prüfungskandidierenden, den Prüfenden und der Simulationspatientin sehr positiv bewertet.Offen bleiben folgende Fragen, welche durch zukünftige Implementierungen von Parcoursprüfungsformaten samt Evaluationen adressiert werden sollten:Inwieweit lassen sich die von der PsychThApprO geforderten 5 verfahrensübergreifenden Kompetenzbereiche, welche wir nicht in unserem Format adressiert haben, systematisch und standardisiert mittels Simula-tionspatientInnen variieren und prüfen?Wie können die Bewertungsbögen optimiert werden, damit die Prüfenden noch objektiver und standardisierter die Prüfungsleistung beurteilen können?Durch welche Maßnahmen kann der organisatorische Aufwand solcher Modul-Parcoursprüfungen sowie der in der PsychThApprO beschriebenen Parcoursprüfungen im Rahmen gehalten werden?Die erste Frage weist auch auf die von vielen Instituten als Herausforderung empfundene Gewährleistung der im Gesetz geforderten Verfahrensbreite hin. Die Verfahrensbreite sollte zukünftig durch Öffnung der Lehrveranstaltungen für andere Richtlinienverfahren jenseits der Verhaltenstherapie umgesetzt werden. Bereits in dem hier beschriebenen Seminar "Moderne Ansätze der Psychotherapie" wurde psychotherapeutische Vielfalt und Breite durch die praxisorientierte Lehre von vier verschiedenen Methoden ermöglicht, wobei durch die mentalisierungsbasierte Psychotherapie auch eine explizit aus der psychodynamischen Tradition stammende Methode einbezogen wurde.Obwohl einige organisatorische Punkte noch zu klären sind, konnten anhand dieser Kurzform einer Parcoursprüfung wichtige erste Erfahrungen hinsichtlich der Implementierung eines anwendungsorientierten Formates gewonnen werden. Da sich insbesondere eine ausreichende Vorbereitung von Prüfungsunterlagen, Bewertungsbögen sowie die umfassende Schulung der Simulationspatientin mittels Lehrvideos sowie durch die Prüfenden sich bewährt haben, werden diese Aspekte auch für zukünftige Parcoursprüfungen von uns empfohlen. Außerdem zeigte sich durch die überwiegend positiven Bewertungen aller drei Gruppen, dass solche Formate eine überzeugende und attraktive Alternative zu dem bisherigen klassischen Prüfungsmodul darstellen.Zukünftige Evaluationen derartiger Parcoursprüfungen -von unabhängigen Wissenschaftlern durchgeführtwerden dazu beitragen, das Format weiter zu optimieren und dabei insbesondere auch die drei in den OSCE-Prüfungen etablierten Gütekriterien zu adressieren.Insgesamt können die Ergebnisse dieser Pilotstudie als guter Indikator dafür angesehen werden, dass die nun kommende Herausforderung -eine anwendungsorientierte Parcoursprüfung für das neue Approbationsstudium zu konzipieren und Varianten dieser Prüfungsform in die neuen Studiengänge zu integrieren -von den psychologischen Instituten erfolgreich bewältigt werden kann.

Unser herzlichster Dank gilt den Prüfungskandidierenden, welche den Mut aufbrachten, diese neue Prüfungsform zu wählen und an der Evaluation teilzunehmen. Zudem danken wir Philipp Herzog, der das praxisrelevante Seminar zu Zwangsstörungen gegeben hat, sowie Doris Kehl, die die Dateneingabe übernommen hat. Alfons Hamm und seinem Team gebührt unser aufrichtiger Dank für die bisherige Ausbildung der Studierenden im Fach klinische Psychologie und Psychotherapie an der Universität Greifswald.

Für diese Übersichtsarbeit war keine Prüfung durch eine Ethikkommission nötig.

Die Autoren erklären, dass keinerlei Interessenkonflikte oder finanzielle Förderungen im Hinblick auf die vorliegende Arbeit bestehen.

Eva-Lotta Brakemeier schrieb die erste Version des Manuskripts. Tim Kaiser führte die Auswertungen der Evaluation durch und las das gesamte Manuskript kritisch gegen. Kristin Pilz ergänzte das Manuskript insbesondere auf Basis ihrer langjährigen Erfahrung mit OSCE-Prüfungen und aus Sicht der Simulationspatientin. Jan Richter trug zum finalen Artikel durch Ergänzungen und Veränderungen basierend auf seiner langjährigen Lehr-und Prüfungserfahrung bei.