Literature DB >> 34622305

[ToSkORL: self- and objective assessment of examination skills in the head and neck region].

Kariem Sharaf1, Axelle Felicio-Briegel2, Magdalena Widmann2, Johanna Huber3, Tanja Kristina Eggersmann4, Ursula Stadlberger3, Florian Schrötzlmair2, Martin Canis2, Axel Lechner5.   

Abstract

BACKGROUND: A central goal of medical school is acquisition of theoretical and practical competences. However, evidence on how capacity acquisition can be measured for special examination techniques is scarce. ToSkORL (Teaching of Skills in Otorhinolaryngology) is a project aimed at scientifically and didactically investigating students' self-evaluation skills in otorhinolaryngologic and head and neck examination techniques.
METHODS: During the examination techniques course, a standardized oral and practical exam for nine different techniques was conducted. Using Likert scales, self-evaluation was based on questionnaires before the clinical skills exam and objective evaluation was performed by the examiners during the examination using a checklist. Self- and objective evaluation were correlated. Nine different examination skills were assessed 42 times each by a total of 91 students.
RESULTS: Self-evaluation of competence in the different examination skills varied widely. Nevertheless, self- and objective evaluation correlated well overall, independent of age and gender. Students highly interested in otorhinolaryngology rated their own skills higher but tended toward overestimation. For examination items with intermediate difficulty, the highest divergences between self- and objective evaluation were found.
CONCLUSION: Student self-evaluations are an appropriate instrument for measuring competences in otorhinolaryngologic examinations. Instructors should focus on items with allegedly intermediate difficulty, which are most often over- and underestimated.
© 2021. The Author(s).

Entities:  

Keywords:  ENT examination; Medical education; Medical training; Student self-assessment; Teaching evaluation

Mesh:

Year:  2021        PMID: 34622305      PMCID: PMC8964619          DOI: 10.1007/s00106-021-01097-y

Source DB:  PubMed          Journal:  HNO        ISSN: 0017-6192            Impact factor:   1.284


Der Kompetenzerwerb in praktischen Fertigkeiten ist ein zentrales Ziel des Medizinstudiums und steht auch in der Neufassung des Nationalen Kompetenzbasierten Lernzielkatalogs Medizin (NKLM) besonders im Fokus. Die Vermittlung der speziellen Untersuchungstechniken der Hals-Nasen-Ohren-Heilkunde und die erfolgreiche „Messung“ von Kompetenzerwerb bleiben große Herausforderungen an den medizinischen Fakultäten.

Hintergrund

Die praxisorientierte Ausbildung und das frühzeitige Erlernen klinisch-praktischer Fähigkeiten zum ärztlichen Kompetenzerwerb haben in den letzten Jahrzehnten einen immer größeren Stellenwert im klinischen Studienabschnitt des Medizinstudiums bekommen [1]. Auch in der Hals-Nasen-Ohren-Heilkunde nimmt der Praxisunterricht einen sehr wichtigen Platz in der studentischen Lehre ein. Dennoch zeigten mehrere Studien unter Medizinern kurz nach Studienabschluss, dass sie sich in wichtigen Bereichen, die den Einsatz praktischer Fertigkeiten verlangen, nicht ausreichend auf den Berufsalltag vorbereitet fühlen [2, 3]. Dies konnte unabhängig vom individuellen theoretischen Wissen festgestellt werden. Das Erlernen praktischer Fähigkeiten sowie das entsprechende Selbstvertrauen, diese einzusetzen, sind jedoch eine wichtige Grundlage für die klinische Tätigkeit. Auf der anderen Seite sollte die Einschätzung der eigenen Fähigkeiten möglichst realitätsnah sein. Ein Unterschätzen könnte ebenso zu einer Fehldiagnose führen wie ein Überschätzen der Kompetenzen patientengefährdend sein könnte. Auf ein gefährliches Überschätzen ohne das Bewusstsein dafür weisen Hodges et al. hin [4]. Eine Metaanalyse zu verschiedenen Aspekten klinisch-praktischer Fertigkeiten zeigte eine in verschiedenen Kompetenzbereichen moderat ausgeprägte Fähigkeit zur Selbsteinschätzung [5]. Als wichtiger Fachdisziplin des Kopf-Hals-Bereichs mit enger Vernetzung zu vielen anderen Fachrichtungen wie zum Beispiel der Neurologie und Pädiatrie dienen Untersuchungstechniken der Hals-Nasen-Ohren-Heilkunde der Diagnostik einer Vielzahl von Symptombildern und Erkrankungen. Während beispielsweise Studien zur Einschätzung operativer Fähigkeiten in der Hals-Nasen-Ohren-ärztlichen Weiterbildung existieren, gibt es nur wenige Studien zur Vermittlung der basalen Untersuchungstechniken des Fachgebiets im Medizinstudium [6-10]. Das Projekt ToSkORL (Teaching of Skills in Otorhinolaryngology) an der LMU München soll zum einen die Selbst- sowie Fremdeinschätzungen zur Kompetenz bei ausgewählten Untersuchungstechniken im Rahmen einer mündlich-praktischen Prüfung in Hals-Nasen-Ohren-Heilkunde während des Medizinstudiums darlegen und zum anderen die Abweichung von Selbst- und Fremdeinschätzung als Maß zur Fähigkeit der realistischen Selbstwahrnehmung beurteilen.

Methodik

Lehrkonzept

Die Lehre zu Untersuchungstechniken des Kopf-Hals-Bereichs erfolgt im klinischen Abschnitt des Medizinischen Curriculums München (MeCuM), dem Humanmedizinstudiengang der LMU München, in weit überwiegendem Maß durch die Klinik und Poliklinik für Hals-Nasen-Ohren-Heilkunde. Einzelne Untersuchungstechniken wie beispielsweise die zervikale Lymphknotenuntersuchung werden jedoch bereits im Rahmen eines fächerübergreifenden Longitudinalkurses behandelt. Alle Studierenden belegen obligat im Rahmen des Studiums zwischen dem zweiten und vierten klinischen Semester zuerst einen Propädeutik-Kurs, den sog. Spiegelkurs, dem frühestens im vierten und spätestens im sechsten klinischen Semester Untersuchungskurse auf den Stationen und in der Poliklinik im Rahmen des Bedside-Teachings folgen. Fakultativ ergänzt werden diese Kurse durch ein klinisches Wahlpflichtfach, Kurse in ambulanter Medizin sowie Möglichkeiten zur Famulatur und der Ableistung eines Tertials des praktischen Jahres. Im selben Semester wie die Bedside-Teachings und zur Vermittlung des theoretischen Wissens erfolgen zudem drei Vorlesungen, fünf Seminare und ein Repetitorium sowie zwei „Problem-Based-Learning-Tutorials“. Die umfassende, zielgerichtete Vermittlung der im Nationalen Kompetenzbasierten Lernzielkatalog Medizin von 2015 (NKLM 2015) vorgesehenen Untersuchungstechniken mit Bezug zur Spiegeluntersuchung im HNO-Bereich erfolgt während des Bedside-Teachings [1]. Am letzten Kurstermin findet eine mündlich-praktische Prüfung statt, deren Bestehen Voraussetzung für den Scheinerwerb ist. Die Liste der zu erlernenden Untersuchungstechniken ist in Tab. 1 (linke Spalte) dargestellt.
Mini-Clinical-Exam-Modul 4ToSkORL OSCE
Ohr und GleichgewichtsorganErhebung eines Trommelfellbefunds mit Handotoskop oder OhrmikroskopErhebung eines Trommelfellbefunds mit Handotoskop
Durchführung der Stimmgabeltests nach Weber und RinneErhebung eines Trommelfellbefunds mit Ohrmikroskop
Orientierende Gleichgewichtsuntersuchung inkl. Nystagmusprüfung mit Frenzel-Brille und LagerungsprobenDurchführung der Stimmgabeltests nach Weber und Rinne
Nase und NasennebenhöhlenErhebung eines Nasenhaupthöhlenbefunds mittels anteriorer RhinoskopieErhebung eines Nasenhaupthöhlenbefunds mittels anteriorer Rhinoskopie
Erhebung eines Nasennebenhöhlen- und Nasopharynxbefunds mittels 30°-Optik
Mundhöhle, Rachen und KehlkopfErhebung eines OropharynxbefundsErhebung eines Mundhöhlen- und Oropharynxbefunds inklusive Untersuchung der Speicheldrüsen und Hirnnerven IX und XII
Klinische Untersuchung der großen Kopfspeicheldrüsen und ihrer AusführungsgängeErhebung eines Kehlkopfbefunds mittels 70°- oder 90°-Optik inklusive Untersuchung des Hirnnerven X
Klinische Untersuchung der Hirnnerven IX und XII
Äußerer Kopf-Hals-BereichErhebung des HalslymphknotenstatusErhebung des Halslymphknotenstatus
Klinische Untersuchung bei Verdacht auf zentrale MittelgesichtsfrakturKlinische Untersuchung bei Verdacht auf zentrale Mittelgesichtsfraktur und akute Rhinosinusitis inklusive Untersuchung des Hirnnervs V
Klinische Untersuchung bei Verdacht auf akute Rhinosinusitis
Prüfung und Graduierung der Fazialisfunktion
Klinische Untersuchung der Hirnnerven V und XI

Prüfungsmodalitäten und Checkliste

Nach Absolvieren der Bedside-Teachings schätzten die Studierenden mittels einer fünfstufigen Likert-Skala („trifft voll zu“ bis „trifft gar nicht zu“) selbst ein, in welchem Ausmaß sie die einzelnen Untersuchungstechniken des Kopf-Hals-Bereichs beherrschten. Zusätzlich wurden Alter, Geschlecht, Semesterzahl und Fragen zum Interesse am Fachgebiet der Hals-Nasen-Ohren-Heilkunde erhoben. Studierende mit weniger als drei absolvierten Bedside-Teachings zum Zeitpunkt der Prüfung wurden ausgeschlossen. Statt der im Curriculum vorgesehenen mündlich-praktischen Mini-CEX-Prüfung, bei der in der Regel zwei Techniken aus dem Erwartungshorizont geprüft werden (Tab. 1, linke Spalte), wurde für diese Studie eine alternative „Objective-Structured-Clinical-Exam-Prüfung“ (ToSkORL OSCE) mit einer Auswahl von neun Untersuchungstechniken inklusive der Endoskopie des Kehlkopfs und der Nasenhaupt- und -nebenhöhlen durchgeführt (Tab. 1, rechte Spalte). Die Studierenden erhielten schriftliche Anweisungen/Fragestellungen zur Durchführung der Untersuchungstechniken im Rahmen der strukturierten Prüfung. Drei Dozierende aus dem Studienteam bewerteten mit einem standardisierten Bogen anhand von fünfstufigen Likert-Skalen („trifft voll zu“ bis „trifft gar nicht zu“) den dargelegten theoretischen Hintergrund, die praktische Durchführung sowie eine Gesamtwertung für die jeweilige Untersuchungstechnik sowie das Ausmaß der notwendigen Hilfestellung zur korrekten Durchführung der jeweiligen Untersuchung. Die drei Dozierenden hatten Facharztniveau und mindestens 3 Jahre Erfahrung in der universitären Lehre. Bei den ersten drei ToSkORL-OSCE-Prüfungen wurde die Auswertemethodik gemeinsam durchgeführt, um nach einem gemeinsamen Standard zu prüfen und zu bewerten. Um eine Vergleichbarkeit mit den Selbsteinschätzungen der Studierenden zu ermöglichen, wurden die Untersuchungsblöcke ebenfalls anhand einer Likert-Skala bewertet. Insgesamt 91 Studierende wurden in Gruppen aus zwei oder drei Studierenden gemeinsam geprüft. In einer Gruppe wurde jede der neun Untersuchungstechniken einmalig geprüft und hierbei durch eine(n) Studierende(n) als Untersucher(in) und an einem oder einer Studierenden als Patient(in) durchgeführt, mithin wurden alle neun Untersuchungstechniken je 42-mal durchgeführt. Die Tab. 2 zeigt Basisdaten für die Studierendenkohorte.
Anzahl Studierenden = 91
Alter26 ± 4,1 Jahre
GeschlechtWeiblich46 (50,5 %)
Männlich44 (48,4 %)
Keine Angabe1 (1,1 %)
Fachsemester8,9 ± 0,6
Famulaturen in HNO4 (4,4 %)
Absolvierte HNO-Untersuchungskurse (max. 4)3,4 ± 0,5

Endpunkte

Für alle ausgewerteten Untersuchungstechniken ergaben sich auf diese Weise Selbst- und Fremdbewertungen. Die Fremdbewertung durch die Prüfenden erfolgte in Unkenntnis der Selbsteinschätzung der Studierenden sowie der weiteren erhobenen Daten. Eine vorhergehende Pseudonymisierung ermöglichte bei der späteren Auswertung die Zuordnung von Fremd- und Selbsteinschätzung. Neben der Auswertung der Selbst- und Fremdbewertungen wurde die jeweilige Differenz aus Fremd- und Selbstbewertung errechnet (Differenz ΔEinschätzung = WertFremd − WertSelbst). Positive Werte ergeben daher eine Selbstüberschätzung der eigenen Fertigkeiten der Studierenden gegenüber der Fremdbewertung, negative Werte eine Selbstunterschätzung gegenüber der Fremdbewertung. Keine Differenz resultiert bei Übereinstimmung von Selbst- und Fremdeinschätzung. Auf der Basis der Mittelwerte der Selbstbewertungen aller 91 Studierenden zu den neun Untersuchungstechniken erfolgte eine Zusammenfassung der Untersuchungstechniken in drei Gruppen mit unterschiedlichem wahrgenommenen Kompetenz‑/Anforderungsniveau.

Statistische Analyse

Für die statistischen Analysen wurde SPSS in der Version 25.0.0.1 (IBM, Armonk/NY, USA) genutzt. Für Mittelwertvergleiche von mehr als zwei Gruppen erfolgten eine ANOVA und für Mittelwertvergleiche von zwei Gruppen t‑Tests. Zur systematischen Analyse von Einflussfaktoren auf die Differenzen von Selbst- und Fremdeinschätzung erfolgten multiple lineare Regressionsanalysen. Die Graphen wurden mit GraphPad Prism 8.4.3 (GraphPad, San Diego/CA, USA) erstellt.

Interessenkonflikte und Ethikvotum

Die Autoren geben keine finanziellen oder persönlichen Verbindungen an, welche die Arbeit oder das Design dieses Projekts beeinflussen. Interessenkonflikte werden von allen AutorInnen verneint. Die Datenerhebung, -verarbeitung und -analyse erfolgte nach Einverständnis des lokalen Ethikkomitees (Ethikkommission der Medizinischen Fakultät der Ludwig-Maximilians-Universität, Votum 19-333) sowie in Einklang mit der Deklaration von Helsinki.

Ergebnisse

Die Einschätzung der eigenen Kompetenz von Studierenden in verschiedenen Untersuchungstechniken ist sehr variabel

Sämtliche neun Einzel-Untersuchungseinheiten wurden von den Teilnehmern im Hinblick auf das subjektive Kompetenzniveau bewertet (Beherrschung der Untersuchung: „trifft voll zu“ = 1 bis „trifft nicht zu“ = 5). Die beste Selbsteinschätzung mit der niedrigsten Varianz zeigte sich bei der Untersuchung der Lymphknoten des Halses (Mittelwert: 1,71; σ2 = 0,45). Ein hohes Kompetenzniveau gaben die Teilnehmer mit einer geringen Varianz ebenfalls für die Untersuchung des Gesichts/Kopfs mit traumatologischem Fokus sowie für die Stimmgabelprüfung nach Weber und Rinne an. Ihre Kompetenz zur Durchführung der weiteren Untersuchungseinheiten schätzten die Teilnehmer bei höherer Varianz als geringer ein (Abb. 1). Abhängig von der Selbsteinschätzung zum Kompetenzniveau sowie der Schwierigkeit der Untersuchung erfolgte eine Gruppierung der Untersuchungseinheiten in „einfach“ (Untersuchung von zervikalen Lymphknoten, des Kopf/Gesichtsbereichs, Stimmgabelprüfung nach Weber/Rinne), „mittlere Schwierigkeit“ (Mund-Rachen-Inspektion, Otoskopie, anteriore Rhinoskopie) mit Einsatz einfacher Instrumente sowie „schwierig“ (Ohrmikroskopie, indirekte Laryngoskopie, Nasenendoskopie) mit Einsatz des speziell HNO-ärztlichen Instrumentariums.

Studierende können ihre eigene Untersuchungskompetenz zumeist realistisch einschätzen

Die Durchführung der Untersuchungen wurde, wie beschrieben, von Dozierenden standardisiert bewertet, sodass ein direkter Vergleich dieser Bewertung mit den zuvor erhobenen Selbsteinschätzungen der Studierenden hinsichtlich ihres Kompetenzniveaus möglich war. Hierbei zeigte die Untersuchung mittels t‑Test (gepaarte Stichproben) in der Mehrzahl der Untersuchungen eine gute Übereinstimmung von Fremd- und Selbstbewertung. Der Gesamtmittelwert der Selbstbewertung lag bei 2,80 ± 0,95 (Standardabweichung), die Dozierendenbewertung bei 2,69 ± 1,07 (Standardabweichung). Eine signifikante Differenz zugunsten einer besseren Fremdbewertung war bei der Mund-Rachen-Inspektion sowie der Otoskopie erkennbar (ΔEinschätzung = −0,57; p = 0,001 bzw. ΔEinschätzung = −1,05; p < 0,001). Die Studierenden unterschätzten folglich ihr eigenes Kompetenzniveau in diesen Untersuchungen, wohingegen die Fremdeinschätzung bei der anterioren Rhinoskopie sowie der Nasenendoskopie signifikant beziehungsweise tendenziell schlechter ausfiel (ΔEinschätzung = 0,40; p = 0,025 bzw. ΔEinschätzung = 0,29; p = 0,050). Bei Gruppierung der Untersuchungseinheiten in die oben beschriebenen Gruppen „einfach“, „mittlere Schwierigkeit“ und „schwierig“ zeigte sich in der Varianzanalyse (ANOVA, Post-hoc-Test mittels Bonferroni-Korrektur), dass bei mittlerer Schwierigkeit die Differenz von Fremd- und Selbsteinschätzung signifikant höher war als bei einfachen sowie schwierigen Untersuchungen (p < 0,005). Die Ergebnisse sind in Abb. 2 zusammengefasst.

Studierende mit hohem Interesse am Fachgebiet HNO-Heilkunde geben bessere Selbsteinschätzungen an, überschätzen sich jedoch eher

Im Folgenden wurde untersucht, ob sich die Ergebnisse von Studierenden mit hohem Interesse am Fachgebiet der Hals-Nasen-Ohren-Heilkunde (Summe der Likert-Skalenpunkte: 1–2) von denen der Studierenden mit mäßigem bis geringem Interesse (Summe der Likert-Skalenpunkte: 3–5) unterscheiden. 24 Studierende (26,4 %) gaben ein hohes Interesse am Fachgebiet an, wohingegen 67 Studierende (73,6 %) mäßiges oder geringes Interesse zeigten. Erstere hielten Kompetenzen in HNO-Heilkunde für signifikant wichtiger für ihre zukünftige berufliche Tätigkeit als die zweite Gruppe (1,71 vs. 2,37; p = 0,0008). Insgesamt hielten 65 (71,4 %) Studierende Kompetenzen in der HNO für ihre zukünftige ärztliche Tätigkeit für wichtig (Likert-Skala 1–2), wohingegen 26 (28,6 %) Studierende nur eine mäßige bis geringe Wichtigkeit hierin erkannten (Likert-Skala 3–4). Studierende mit hohem Interesse an der Hals-Nasen-Ohren-Heilkunde stuften ihre eigenen Untersuchungsfertigkeiten signifikant besser ein (2,65 vs. 2,94; p = 0,0035). Jedoch überschätzten sie ihre Kompetenzen auch eher als Studierende mit mäßigem bis geringem Interesse an der HNO-Heilkunde (ΔEinschätzung 0,093 vs. −0,18; p = 0,033), wie in Abb. 3 gezeigt wird. Die Selbsteinschätzung der Kompetenzen in allen bewerteten Untersuchungseinheiten wurde hierfür miteinander verglichen.

Die Selbsteinschätzungskompetenz der Studierenden ist weitgehend unabhängig von Alter und Geschlecht

Ergänzend untersuchten wir in einem multiplen linearen Regressionsmodell verschiedene unabhängige Variablen im Hinblick auf den Einfluss auf die Konkordanz von Selbst- und Fremdeinschätzung (Tab. 3). Es wurde das Alter der Studierenden, das Geschlecht und das Interesse an HNO-Heilkunde (hier in detaillierter intervallskalierter Abstufung 1–5: hoch bis niedrig) untersucht. Bei den als „schwer“ eingestuften Untersuchungstechniken (im Besonderen bei der Nasenendoskopie) war das Geschlecht ein Prädiktor für die Selbsteinschätzungsgüte, männliche Studierende neigten hier in absolut gesehen geringem Maß eher zu Selbstüberschätzung. Das Alter stellte sich als Prädiktor für eine hohe Konkordanz von Fremd- und Selbsteinschätzung bei der Nasenendoskopie dar, das Interesse an HNO-Heilkunde bei der Stimmgabeluntersuchung. In der überwiegenden Zahl der Untersuchungstechniken im Einzelnen als auch in der Zusammenfassung einzelner Untersuchungen nach Schwierigkeitsgrad oder Organgebiet war die Selbsteinschätzungsgüte unabhängig vom Alter oder dem Geschlecht der Studierenden (Tab. 3).
Unabhängige Variablen
Untersuchungstechnikenp (Regressionsanalyse)p (Alter)p (Geschlecht)p (Interesse an HNO)
Gesamt0,1610,5160,0660,379
Leicht0,0780,6970,6610,012
Mittelschwer0,1600,5580,0260,889
Schwer0,0100,1580,0060,736

Organgebiet

äußerer Kopf-Hals-Bereich

0,1190,1760,4880,068

Organgebiet

Ohr

0,1240,7670,2100,046

Organgebiet

Mundhöhle/Rachen, Larynx

0,9920,8770,9940,778

Organgebiet

Nase und Nebenhöhlen

0,0960,0380,1540,786
Lymphknoten0,2880,5000,1650,224
Stimmgabel0,0160,0600,3210,004
Äußerer Kopf0,2320,2670,7350,127
Mundhöhle, Rachen0,2730,3280,1690,162
Anteriore Rhinoskopie0,4520,1700,5920,363
Otoskopie0,4820,5230,1610,617
Ohrmikroskopie0,1390,0510,0970,841
Laryngoskopie0,6850,2590,7780,573
NNH-Endoskopie0,0010,0250,0000,656

Fett hervorgehoben in der Tabelle sind die Regressionsanalysen mit einem signifikanten Ergebnis in der statistischen Testung, jeweils dann noch kursiv hervorgehoben sind die bei diesen Regressionsanalysen signifikanten unabhängigen Variablen.

Organgebiet äußerer Kopf-Hals-Bereich Organgebiet Ohr Organgebiet Mundhöhle/Rachen, Larynx Organgebiet Nase und Nebenhöhlen Fett hervorgehoben in der Tabelle sind die Regressionsanalysen mit einem signifikanten Ergebnis in der statistischen Testung, jeweils dann noch kursiv hervorgehoben sind die bei diesen Regressionsanalysen signifikanten unabhängigen Variablen.

Diskussion

Eine zunehmende Praxisorientierung des Medizinstudiums mit einer möglichst umfassenden und fundierten Ausbildung der Studierenden soll den langfristigen Erwerb von Kompetenzen in praktischen Fertigkeiten gewährleisten [11-14]. In der medizindidaktischen Forschung haben sich in diesem Zusammenhang insbesondere Studien bewährt, die anhand standardisierter Auswertemethoden die Selbst- und Fremdeinschätzung verglichen [5]. Diese umfassen in der Regel entweder Korrelationsanalysen oder Vergleichsanalysen verbundener oder unverbundener Datensätze aus Selbst- und Fremdeinschätzung, [5] In der Literatur finden sich verschiedene Studien, in welchen beispielsweise Abweichungen zwischen Selbst- und Fremdeinschätzung in der Einschätzung von Kompetenzen bei der Anamnese in der Zahnmedizin oder bei „objective structured clinical exams“ (OSCE) in der Pädiatrie ausgewertet wurden [15, 16]. Für die vorliegende Studie wurden neun Untersuchungskomplexe ausgewählt, die das Fachgebiet Hals-Nasen-Ohren-Heilkunde mit seinen Organgebieten breit und repräsentativ abbilden. Ähnliche Untersuchungskomplexe wurden bereits in deutschsprachigen Studien zur Lernkurve beim Erlernen der HNO-Spiegeluntersuchung beziehungsweise der Operationalisierung der HNO-Spiegeluntersuchung verwendet [9, 10]. In die Gesamtbewertung der Fremdeinschätzung flossen sowohl die Fähigkeiten der gebietsspezifischen Anamnese – somit theoretische Grundlagen – als auch praktische Fertigkeiten auf Basis der Durchführung der Untersuchung ein. Neben einzelnen Fähigkeiten wurde auch der Einfluss von Geschlecht, Alter, Vorerfahrung und fachlichem Interesse auf eine bessere oder schlechtere Selbsteinschätzung erforscht. Aus einzelnen Studien dieser Art wird z. B. die Hypothese abgeleitet, dass weibliche Teilnehmer zu einer Unterschätzung ihrer Fähigkeiten neigen [5, 17]. In unserer Kohorte fanden sich keine Hinweise auf systematische Geschlechterunterschiede bei der Güte der Selbsteinschätzung. Auch das Studierendenalter spielte keine wesentliche Rolle, obwohl es innerhalb der Kohorte teils große Altersunterschiede gab, die sich gut durch die Zulassungskriterien zum Medizinstudium in Deutschland über „Hochschulstart“ (ehemals „ZVS“) erklären lassen. Insofern spiegelt das Studierendenalter auch nur bedingt den Faktor Erfahrung wider, der in Studien kontrovers als möglicher Einfluss auf die Güte der Selbsteinschätzung gilt, da sich alle 91 Studierenden unserer Kohorte mit maximal 2 Fachsemestern Unterschied am Ende des klinischen Studienabschnitts befanden [3, 5, 18, 19]. Ein besonders auffälliges Ergebnis dieser Studie war die Identifikation einzelner Untersuchungstechniken, die als besonders leicht beziehungsweise gut beherrscht empfunden und auch fremdbewertet wurden, und andere, die als schwieriger und deren Ausführung als schlechter beherrscht eingestuft wurden. Dies liegt insgesamt am wahrscheinlichsten an Spezifika des Curriculums im LMU-Humanmedizinstudiengang „MeCuM“ und dem vorhandenen Lehrkonzept im Rahmen der HNO-Bedside-Kurse: Grund für die besonders guten Einstufungen bei der zervikalen Lymphknoten-Untersuchung könnte die zu diesem Zeitpunkt bereits ein bis zwei Fachsemester zuvor abgelegte Prüfung zur Lymphknoten-Untersuchung am ganzen Körper sein. Die Stimmgabelprüfungen nach Weber und Rinne sind bereits Teil der vorklinischen Lehre im physiologischen Praktikum. Die traumatologische Untersuchung des Kopfs überschneidet sich ebenfalls mit Lehrinhalten der Unfallchirurgie. Otoskopie und Mund-Rachen-Inspektion könnten bereits im Rahmen der Famulatur oder Praktika in Allgemeinmedizin, Pädiatrie oder Neurologie geübt worden sein. Dies unterstreicht wiederum den Stellenwert der Erfahrung in praktischen Fertigkeiten und dem mehrfachen Befassen mit einer Untersuchungstechnik, welche entscheidend zu einer besseren Kompetenz und einer besseren Einschätzung der eigenen Kompetenz beitragen [5, 10, 11]. Im traditionellen Lehrkonzept der LMU München mit dem in Tab. 1 aufgeführten Erwartungshorizont für die praktische Mini-CEX-Prüfung bestand zudem keine Fokussierung auf die Endoskopie-Techniken, sodass diese im Rahmen unserer Kohorte als besonders schwer wahrgenommen und die Kompetenz vergleichsweise schlecht bewertet wurde. Andererseits korreliert die beobachtete Graduierung bei den verschiedenen Untersuchungskomplexen damit, in welchem Ausmaß spezielles Instrumentarium eingesetzt werden muss: Die Untersuchungen mit Hilfsinstrumenten wie dem Nasenspekulum oder Ohrtrichter wurden als schwieriger empfunden und Untersuchungen mit Winkeloptiken als besonders schwierig. Bei den als mittelmäßig schwierig empfundenen Techniken zeigten sich die größten Abweichungen zwischen Selbst- und Fremdeinschätzung. Dieses Ergebnis weist auf eine trügerische Fehleinschätzung der Studierenden hin. Sowohl eine Über- als auch Unterschätzung der eigenen Fähigkeiten kann im ärztlichen Beruf leicht zu unzureichenden Untersuchungsergebnissen und letztlich zu Fehldiagnosen führen [20]. In unserer Kohorte stuften sich Studierende mit hohem Interesse am Fachgebiet Hals-Nasen-Ohren-Heilkunde besser ein und neigten zur Selbstüberschätzung, absolut betrachtet jedoch nur in einem geringen Ausmaß. Ein eher gegenteiliges Ergebnis, dass sich Studierende mit schlechteren Studiennoten überschätzten und sich solche mit besseren Noten unterschätzten, zeigte sich beispielsweise bei der Evaluation von Famulanten im Bereich der Gynäkologie [20]. Bei der Prüfung der Selbsteinschätzung verschiedener Skills in einem pädiatrischen OSCE fanden sich sowohl Skills, in denen die eigenen Fähigkeiten überschätzt, als auch Skills, in denen die eigenen Fähigkeiten unterschätzt wurden [16]. Eine generelle Selbstüberschätzung, die in anderen Kohorten für bestimmte Skills der Anamnese und Untersuchung gefunden wurde, konnte nicht festgestellt werden [15]. In der Literatur finden sich insgesamt starke Hinweise, dass trotz kleiner Abweichungen in Bezug auf einzelne Faktoren wie das Geschlecht oder das fachliche Interesse oder auf einzelne Skills die eigene Wahrnehmung oftmals gut mit der Einschätzung von außen korreliert [5]. Viele Studien geben Hinweise darauf, dass die Selbsteinschätzung mit wachsender (Berufs‑)Erfahrung zunehmend besser wird [4, 18, 21]. Trotzdem erscheint die Nutzung von Selbsteinschätzungen als Indikator für studentische Kompetenz beziehungsweise den Kompetenzerwerb weitgehend reliabel, insbesondere wenn man sich die eher geringe Tendenz zur Selbstüber- und -unterschätzung für einzelne Skills oder bestimmte Subkohorten bewusst macht [5, 12, 22, 23]. Für die chirurgische Weiterbildung in der Hals-Nasen-Ohren-Heilkunde konnte zudem gezeigt werden, dass die zeitnahe Erhebung der Daten nach der Phase des Kompetenzerwerbs wichtig ist [8]. Darüber hinaus lassen sich aus den Daten weitere Schlüsse folgern: die als mittelmäßig schwer empfundenen Untersuchungstechniken wie die Otoskopie, die anteriore Rhinoskopie und die Mundhöhlen-Rachen-Inspektion werden eher über- beziehungsweise unterschätzt, sodass in Zukunft der Fokus in der Lehre stärker auf diesen Untersuchungstechniken liegen sollte und zudem ergänzende Lehrangebote wie Refresher-Kurse zu einer nachhaltigen Verbesserung der praktischen Kompetenzen angeboten werden sollten. Dies konnte auch in der Arbeit von Polk et al. eindrücklich gezeigt werden, in dem mit der Durchführung eines stringenten repetitiven Lehrkonzepts während der Blockpraktikumswoche eine deutliche, signifikante Lernkurve beim Erlernen der HNO-Spiegeluntersuchung nachgewiesen werden konnte [10]. Ebenso gilt dies für die als schwierig empfundene Ohrmikroskopie und die Endoskopie-Techniken, für die eine hohe Unsicherheit bei den Studierenden besteht. Insgesamt weisen auch andere Studien auf Lücken beim Kompetenzerwerb während des Medizinstudiums hin [2, 24]. Strategien, die den Kompetenzerwerb unterstützen können, sind beispielsweise das regelmäßige Abfragen der selbst eingeschätzten Kompetenz in der Lernphase sowie das frühzeitige Einführen praktischer Lehrinhalte in das Medizinstudium [10, 11, 25]. Ebenso kann ein operationalisiertes Konzept, das die Vermittlung der HNO-Spiegeluntersuchung als Erlernen psychomotorischer Fähigkeiten standardisiert, helfen, das Niveau des Lernerfolgs der Studierenden und deren Akzeptanz des Lernkonzepts zu steigern [9]. Neuere Lernmethoden wie Blended Learning könnten ebenfalls hilfreich sein, den Kompetenzerwerb für Untersuchungstechniken des Kopf-Hals-Bereichs zu fördern. Eine Untersuchung aus dem Jahr 2017 ergab, dass solche Angebote, die Online-Inhalte mit Präsenzunterricht in einem abgestimmtem Lehrkonzept verbinden, im deutschsprachigen Raum relativ selten waren [26]. Die Evaluation eines solchen Konzepts wies vor allem auf die Bedeutung einer Aktivierung der Studierenden hin, um einen höheren Lernerfolg zu erreichen, selbst wenn solche Lernkonzepte trotz der Innovation nicht beliebter als klassische Lehrformen sein müssen [27, 28].

Fazit für die Praxis

Die Methodiken zur Messung von Kompetenz sind in der Regel sehr aufwendig, da hierfür für eine valide Auswertung meist sowohl Daten zur Selbst- als auch Fremdeinschätzung erhoben werden müssen. Jedoch erscheint die studentische Selbsteinschätzung zumindest in den meisten Fällen mit Fremdeinschätzungen durch Peers oder Lehrende stark zu korrelieren. Die vorliegende Studie unterstützt diese These, wobei eine Validierung mit einem Vergleich von Selbst- und Fremdeinschätzung weiterhin sinnvoll erscheint. Innerhalb einer Fakultät können zum Zweck der Erhebung eines Status quo oder zur Messung des Effekts einer neuen Lehrmethode zur Vermittlung praktischer Fähigkeiten durchaus auch die Erhebung der Selbsteinschätzung der Studierenden allein bereits sinnvoll und ausreichend sein. In der Zukunft muss in der universitären Hals-Nasen-Ohren-Heilkunde tendenziell mehr Wert auf die Vermittlung der speziellen Untersuchungstechniken des Kopf-Hals-Bereichs gelegt werden. Die Erhebung von Selbsteinschätzungen und die Korrelation mit Fremdeinschätzungen durch Lehrende können bei der Einführung neuer Lehrkonzepte ein wichtiges Werkzeug zur Auswertung sein.
  27 in total

1.  Clinical skills in early postgraduate medical trainees: patterns of acquisition of confidence and experience among junior doctors in a university teaching hospital.

Authors:  G M Marel; P M Lyon; L Barnsley; E Hibbert; A Parise
Journal:  Med Educ       Date:  2000-12       Impact factor: 6.251

2.  A new blended learning concept for medical students in otolaryngology.

Authors:  Matthaeus C Grasl; Peter Pokieser; Andreas Gleiss; Juergen Brandstaetter; Thorsten Sigmund; Boban M Erovic; Martin R Fischer
Journal:  Arch Otolaryngol Head Neck Surg       Date:  2012-04

Review 3.  Medical students' self-assessment of performance: results from three meta-analyses.

Authors:  Danielle Blanch-Hartigan
Journal:  Patient Educ Couns       Date:  2010-08-14

4.  Student self-assessment in a paediatric objective structured clinical examination.

Authors:  R B Pierre; A Wierenga; M Barton; K Thame; J M Branday; C D C Christie
Journal:  West Indian Med J       Date:  2005-03       Impact factor: 0.171

5.  [Operationalization of the clinical head and neck examination].

Authors:  M Kemper; T Zahnert; A Graupner; M Neudert
Journal:  Laryngorhinootologie       Date:  2011-07-19       Impact factor: 1.057

6.  [E-learning in ENT: Usage in University Medical Centers in Germany].

Authors:  Peter Freiherr von Saß; Thomas Klenzner; Kathrin Scheckenbach; Adam Chaker
Journal:  Laryngorhinootologie       Date:  2017-01-18       Impact factor: 1.057

7.  The effect of structured self-assessment in virtual reality simulation training of mastoidectomy.

Authors:  Steven Arild Wuyts Andersen; Mads Guldager; Peter Trier Mikkelsen; Mads Sølvsten Sørensen
Journal:  Eur Arch Otorhinolaryngol       Date:  2019-09-20       Impact factor: 2.503

8.  Undergraduate educational environment, perceived preparedness for postgraduate clinical training, and pass rate on the National Medical Licensure Examination in Japan.

Authors:  Yasuharu Tokuda; Eiji Goto; Junji Otaki; Joshua Jacobs; Fumio Omata; Haruo Obara; Mina Shapiro; Kumiko Soejima; Yasushi Ishida; Sachiko Ohde; Osamu Takahashi; Tsuguya Fukui
Journal:  BMC Med Educ       Date:  2010-05-20       Impact factor: 2.463

9.  [Learning curve of the ENT mirror examination : Goal-oriented curriculum planning for psychomotor learning].

Authors:  M-L Polk; S Lailach; M Kemper; A Bendas; T Zahnert; M Neudert
Journal:  HNO       Date:  2020-04       Impact factor: 1.284

10.  Advancing Competency-Based Medical Education: A Charter for Clinician-Educators.

Authors:  Carol Carraccio; Robert Englander; Elaine Van Melle; Olle Ten Cate; Jocelyn Lockyer; Ming-Ka Chan; Jason R Frank; Linda S Snell
Journal:  Acad Med       Date:  2016-05       Impact factor: 6.893

View more
  1 in total

1.  Misjudgment of Skills in Clinical Examination Increases in Medical Students Due to a Shift to Exclusively Online Studies during the COVID-19 Pandemic.

Authors:  Axel Lechner; Stefan P Haider; Benedikt Paul; Pablo F F Escrihuela Branz; Axelle Felicio-Briegel; Magdalena Widmann; Johanna Huber; Ursula Stadlberger; Martin Canis; Florian Schrötzlmair; Kariem Sharaf
Journal:  J Pers Med       Date:  2022-05-12
  1 in total

北京卡尤迪生物科技股份有限公司 © 2022-2023.