Ellipse

Was ist eine Prüfungsmatrix?

Was ist der A-Wert?

Statistische Analysen helfen Ihnen, eine gute (digitalen) Prüfung zu erstellen. Einer der statistischen Begriffe, den Sie verwenden können, ist der A-Wert. Aber was genau ist der A-Wert einer Frage? Und was nützt der A-Wert bei einer (digitalen) Prüfung? 

Was ist der A-Wert?

Der A-Wert ist der Prozentsatz (oder Anteil) der Kandidaten, die einen „Ablenker“ für die Frage wählen. Bei einer Multi-Choice-Frage gibt es verschiedene Antwortmöglichkeiten. Neben der richtigen Antwort gibt es mehrere „Ablenker “. Mithilfe des A-Wertes können Sie die Qualität der Ablenker messen. Jeder Ablenker in der Prüfung hat also einen eigenen A-Wert. Dieser A-Wert gibt an, wie hoch der Anteil der Kandidaten ist, die diese Ablenker wählen.

Es besteht eine clevere Gedächtnisstütze, um sich zu merken, wofür der A-Wert steht. Sie können den A-Wert als den Ablenkungswert” betrachten.

Analysen auf Item-Niveau

Eine (digitale) summative Prüfung zielt darauf ab, ein endgültiges Urteil zu fällen. Als Prüfungs- oder Ausbildungsinstitut wollen Sie natürlich Wissen und Erkenntnisse so gut wie möglich messen. Sie möchten zum Beispiel, dass das Ergebnis einer Prüfung eine Widerspieglung der Kandidaten ist, die sich gut oder weniger gut vorbereitet haben. Es ist daher ratsam, statistische Daten auf der Ebene der Items zu betrachten und zu analysieren. Eine nützliche statistische Variable ist der A-Wert, der Ihnen einen Einblick auf Item-Ebene gibt und es Ihnen ermöglicht, die Qualität der Items zu verbessern.

Beispiel:

Angenommen, Sie haben eine Prüfung mit 20 Multiple-Choice-Fragen. Es mag sein, dass nicht jede Frage aus prüfungstechnischer Sicht gleichwertig ist. Indem Sie den A-Wert transparent machen, wissen Sie, wie viel Prozent der Kandidaten einen Ablenker wählen. Eine Beispielfrage lautet wie folgt:

Frage: Welche Farben hat das Logo von Optimum Assessment?

  1. Blau und Grün
  2. Gelb und Schwarz
  3. Rot und Schwarz
  4. Rot und Gelb

Antwort 3 ist richtig und stellt die „Schlüsselantwort” dar. Die übrigen Antworten (1, 2 und 4) sind Ablenker. Angenommen, die statistischen Analysen zeigen, dass Antwortmöglichkeit A von den Kandidaten fast nie gewählt wird. In diesem Fall passt die Antwortmöglichkeit nicht zur Frage.

Wahrscheinlichkeitswert

Infolgedessen erhöht sich der Wahrscheinlichkeitswert. Die Wahrscheinlichkeitswert ist die Punktzahl, die ein Kandidat erreichen kann, wenn er die richtige Antwort zwar errät, sie aber nicht weiß. Ein Item mit einem niedrigen A-Wert trägt dazu bei, dass Ihre Prüfung den Wissensstand Ihrer Kandidaten weniger gut widerspiegelt. In diesem Fall können Sie den Ablenker ändern.

Der A-Wert zwischen 0 und 1

Der A-Wert liegt zwischen 0 und 1. Angenommen, Sie haben eine richtige Antwortmöglichkeit, die von den Kandidaten in der Hälfte der Fälle gewählt wird, dann gibt es immer noch einen Wert von 0,5, der auf die Ablenker verteilt wird. Sie berechnen also immer einen A-Wert über die Antwortmöglichkeiten.

Weitere Inspiration?

Möchten Sie mehr über den A-Wert oder andere Statistiken im Zusammenhang mit digitalen Prüfungen erfahren? Werfen Sie einen Blick in unsere Kenntnisdatenbank. Sie können auch unseren Newsletter abonnieren oder uns auf LinkedIn folgen, sodass Sie immer über Entwicklungen im Bereich der digitalen Prüfung unterrichtet sind.