Validität und Reliabilität eines Instruments zur Messung der Qualität der Kommunikation und seine Eignung im studentischen Unterricht

Abstract

Fragestellung und Zielsetzung: Ausgehend von dem Ziel, kommunikative Fähigkeiten von Studierenden der Humanmedizin objektiv zu messen, sollte in dieser Studie untersucht werden, ob eine ins Deutsche übersetzte Kurzversion des „Calgary-Cambridge Observation Guide for the Medical Interview“ (CCOG) von Kurtz und Silverman (1996) valide und reliabel ist und sich damit die Kommunikationsfähigkeit von Studierenden der Medizin bewerten lässt.

Methode: Eine Auswahl von Ärzten, wissenschaftlichen Mitarbeitern und Studierenden des klinischen Studienabschnittes evaluierten im Abstand von mindestens drei Monaten fünf Anamnese-Videos mittels der ins Deutsche übersetzten „CCOG-Kurzversion“. Die Videos bestanden aus je einem Gespräch zwischen einem Studierenden des ersten klinischen Semesters in der Rolle des Arztes bzw. einer approbierten Ärztin und einem Schauspielpatienten – in unterschiedlicher Kommunikationsqualität. Die Auswertung erfolgte deskriptiv nach folgenden Kriterien: Bewertungszeitpunkt, Geschlecht bzw. Gruppe der Rater, Qualität der Videogespräche. Darüberhinaus wurden eine explorative und eine konfirmatorische Faktorenanalyse berechnet und die Retest-Reliabilität (Intra-Rater-Reliabilität) sowie die Intra-Class-Correlation (Inter-Rater-Reliabilität) bestimmt.

Ergebnisse: 30 Rater beteiligten sich an der Studie, davon drei als sog. „Goldstan-dard“. Die Gesamtbewertung aller fünf Anamnese-Videos zeigte eine geringfügige Verbesserung in der Notenvergabe beim zweiten Bewertungszeitpunkt. In der Benotung waren professionelle Rater generell etwas strenger als Laien, Ärzte etwas strenger als Studierende und weibliche Rater etwas strenger als männliche. „Gold-standard“ und übrige Rater unterschieden sich bei einzelnen Items bis zu 1,6 Notenpunkten (z.B. beim Item „verbale/nonverbale Unterstützung des Patienten“). In der Originalversion enthält der CCOG 28 Items, die in sechs Skalen (mit jeweils 3 bis 7 Items) zusammengefasst sind. Diese Struktur ließ sich in der hier gerechneten Faktorenanalyse nur bedingt abbilden. Gemäß Eigenvalue > 1 genügten 5 Faktoren zur Abbildung bzw. Aufteilung der Items. Darüber hinaus zeigte sich eine andere Skalenzuordnung als im Original und über die Hälfte der Items (15/28) lud auf demselben Faktor. Auch die Inter-Rater-Übereinstimmung in der Beantwortung einzelner Items war nicht optimal (ICC-Range: 0,05 bis 0,57).

Schlussfolgerungen: Die CCOG-Kurzversion zeigte relativ gute Übereinstimmun-gen bei der Retest-Reliabilität. Schwierigkeiten zeigten sich bei der Benotung einiger Items im Vergleich zwischen dem „Goldstandard“ und den übrigen Ratern. Die Skalen-Struktur der Items und die Inter-Rater-Reliabilität sind nur bedingt akzeptabel. Vielleicht hätte eine dreistufige Bewertungsskala oder eine homogene Rater-Gruppe oder auch eine bessere Schulung das Ergebnis der ICC verbessert. Es sollten einige Items gestrichen, sprachlich trennschärfer formuliert oder anders zusammengefasst, neue Items hinzugefügt und Skalen neu strukturiert werden.