Struktur der Fortbildungsartikel und Fragen zur Lernerfolgskontrolle am Beispiel der Zeitschriften Der Orthopäde und Der Unfallchirurg

Zusammenfassung

Hintergrund und Ziel:

Die zertifizierte Fortbildung in Printmedien sieht eine „Lernerfolgskontrolle“ zum Nachweis der personenbezogenen Teilnahme vor [1]. Es war das Ziel dieser Arbeit, die Selektion von Textaussagen für die Multiple-Choice-Fragen zu analysieren und hinsichtlich ihrer klinischen Bedeutung zu bewerten.

Methodik:

Es wurde ein Jahrgang zertifizierter Fortbildungsartikel in den Zeitschriften Der Orthopäde und Der Unfallchirurg (insgesamt 23 Fortbildungsartikel) ausgewertet. Aus den Texten wurden den Autoren offensichtlich wichtige Aussagen (Kernaussagen) selektiert, aus denen nochmals eine Gruppe von Kernaussagen mit besonderer klinischer Bedeutung (prioritäre Kernaussagen) gebildet wurde. Des Weiteren wurde untersucht, inwieweit beide Typen von Kernaussagen Gegenstand von unterschiedlichen Antwortalternativen in unterschiedlich konfigurierten Multiple-Choice-Fragen waren.

Ergebnisse:

1 333 Kernaussagen im Text standen 216 Multiple-Choice-Fragen mit insgesamt 1 048 Antwortalternativen gegenüber. Bei 144 Multiple- Choice-Fragen war eine Kernaussage Thema der Frage, Kernaussagen wurden 434-mal als sinnvolle Distraktoren und 235-mal als unsinnige Distraktoren eingesetzt. 256 Kernaussagen wurden in keiner Form in der Lernerfolgskontrolle abgebildet. Auch bei Betrachtung nur der prioritären Kernaussagen wurden diese lediglich in 23–90% als Antwortalternativen in Fragen eingesetzt, die eine Kernaussage thematisierten.

Schlussfolgerung:

Fachärztliche Fortbildung in Printmedien generiert eine Informationsvielfalt und -tiefe, die sich bei der zur Verfügung stehenden Zahl von Fragen zur Lernerfolgskontrolle nicht adäquat abbilden lässt. Allerdings ließe sich durch eine noch bewusstere Berücksichtigung insbesondere prioritärer Kernaussagen in den Multiple-Choice-Fragen der Anteil von in Fragen abgebildeten Kernaussagen weiter steigern.

Abstract

Background and Purpose:

In Germany, accredited CME articles have to present ten multiple-choice questions (MCQs) per article for knowledge assessment [1]. It was the aim of this study to describe the selection of key messages for construction of MCQs and their relation to clinical relevance of the content.

Methods:

23 CME articles in two specialist journals (Der Orthopäde [The Orthopedist] and Der Unfallchirurg [The Trauma Surgeon]) were analyzed. First, the key messages of the text as marked by the authors were identified, and then, a subset of top key messages was selected on the basis of clinical relevance. This was followed by a description, to what extent both sets of messages had been used for the construction of MCQs.

Results:

1,333 key messages were identified which could have been used for 1,048 test items in 216 MCQs. 256 key messages had never been used in MCQs. 434 key messages had been used as clinically meaningful distractors and 235 as senseless distractors, respectively. In only 144 cases, the key message was the topic of the MCQ. Even top key messages could only be found in 23–90% of the test items of MCQs, which had a key message as topic.

Conclusion:

Specialist CME in print media contains too much information to be adequately mirrored in the limited number of MCQs. However, the more deliberate use of key messages in the MCQs could yield a better result compared to the present situation.