Distraktorenanalyse

Der theoretische Teil sämtlicher Lehrabschlussprüfungen in Handwerk und Indus- trie wird in programmierter Form durchgeführt. Zunehmend gilt dies auch für Wis-sensprüfungen im Bereich von Hochschulen und Universitäten. Nicht immer aber wird die Qualität der dabei eingesetzten Alternativantworten einer Aufgaben-, ins-besondere einer Distraktorenanalyse unterzogen. Als gute Distraktoren (lat. distrahere = zerstreuen, schwankend machen, nach verschiedenen Richtungen hinziehen) gelten Alternativantworten, die eindeutig falsch, dennoch aber in hohem Maße plausibel sind, so dass sie auf Probanden, die die richtige Lösung nicht kennen, eine gewisse Anziehungskraft ausüben. Hierbei sollten die auf die einzelnen Distraktoren entfallenden Antworten mit möglichst gleicher Häufigkeit bzw. Wahrscheinlichkeit auftreten.

Mit den hier vorliegenden Tabellen kann ohne jede Rechenarbeit festgestellt werden, inwieweit die Besetzungen einzelner Distraktoren zur Wahrscheinlichkeit des Vorliegens oder des Abweichens von einer Gleichverteilung beitragen, und welche der einzelnen Distraktoren bei anzunehmender Abweichung von der Gleichverteilung als unter- oder überbesetzt gelten müssen. Hierzu muss in der Tabelle lediglich die Zahl NF der auf eine Alternativaufgabe entfallenden Falschantworten aufgesucht und in den Spalten d = 2, 3, 4 oder 5 Distraktoren der zugehörige UGA- und OGA-Wert abgelesen werden. Die gewünschte Gleichverteilung liegt vor, wenn die betrachteten Distraktorenwerte im Intervall [UGA,OGA] liegen.

Die Position der Distraktoren ist abhängig von der Zuordnung der richtigen Auswahlantworten. Diese sollten nicht zum Beispiel häufig an erster Stelle stehen, vielmehr gleichverteilt und zufällig angeordnet werden. Dem dient die Auflistung gleichverteilter Zufallszahlen für Tests mit 2, 3, 4, 5 und 6 Antwortvorgaben.

Der am Hintergrundwissen interessierte Leser wird die den Tabellen zugrundeliegenden mathematischen Ableitungen und den Nachweis einer nur geringen Ratewahrscheinlichkeit von 1,6 bzw. 0,07% bei Vorgabe einer Zahl von 10 bzw. 20 Aufgaben mit jeweils 3 Distraktoren und einer Bestantwort schätzen.

Testkonstrukteuren möge die vorgelegte Schrift eine Hilfe bei der Gestaltung von Alternativantworten sein, den Auswertern von Testergebnissen möge sie helfen, die Qualität gestellter Aufgaben zu überprüfen und gegebenenfalls zu verbessern.