Die Fallstricke bei der Festlegung einer Prüfung

Und Tipps, wie man nicht darauf hereinfällt.  

Die Festlegung von Prüfungen ist ein Thema, das in Prüfungsordnungen, Qualitätssicherungssystemen, Gütezeichen und Rechtsvorschriften immer wieder auftaucht. Manchmal wird auch festgelegt, wer dies tut und was bei dieser Festlegung geschehen soll. Es hat also den Anschein einer Formalität. Warum sollte man ungeachtet der Vorschriften eine Prüfung einführen? Und geht das nicht etwas schneller und billiger? Wir geben einige praktische Tipps für die Festlegung einer Prüfung und erörtern die Fallstricke. Fallen Sie nicht darauf herein und lesen Sie weiter!

Was ist Etablierung?

Die Ermittlung einer Prüfung ist der Schritt zwischen Konstruktion und Durchführung. Dabei wird bewertet und festgehalten, ob eine Prüfung oder Prüfungsfrage den Qualitätsanforderungen entspricht.

Wenn ein Bauträger oder ein Baukonzern ihre Arbeit getan haben, ist die Prüfung oft schon abgehakt. Welchen Sinn hat dann die Festlegung? Abgesehen von den Regeln wird damit nach außen signalisiert, dass die Prüfungen geprüft werden, bevor sie eingesetzt werden. “Es gibt immer einen Kontrollschritt” und “die Prüfung wird immer von mehr als einem Augenpaar gesehen” sind gängige Aussagen.

Neben der Wahrnehmung hat die Festlegung einer Prüfung auch einige formale Merkmale:

• Es handelt sich um eine offizielle Vereinbarung der Prüfungskommission oder einem Berufsverband;
• Es ist die Bestätigung, dass eine Prüfung das misst, was sie messen soll, d. h. dass sie für die Prüfungsanforderungen und damit für die berufliche Praxis relevant ist;
• Die Behebung vermeidet Fehler bei Tests und Inhalten.

Die Festlegung einer Prüfung ist also ein wichtiger Teil des Prüfungsentwicklungsprozesses. Aber es gibt auch Hindernisse.

In Ermangelung von Fachleuten sollten Sie nicht den einfachen Weg wählen

Natürlich wissen wir alle, dass ein Sanierer nicht mit dem Statiker identisch ist; schließlich kontrolliert der Metzger auch nicht sein eigenes Fleisch. Aber was macht man, wenn es keine Spezialisten gibt? Je höher und spezialisierter das Niveau ist, desto schwieriger ist es, Enthusiasten zu finden, die diese Arbeit gut machen können und dafür nicht den üblichen Spitzensatz verlangen. Eine Alternative besteht darin, die Bauherren die Arbeit der anderen reparieren zu lassen, oder noch besser, sich mit Budgeterhöhungen oder anderen monetären Motiven zu befassen. Vielleicht möchten sich die Reparateure auf eine gute Zusammenarbeit einlassen, ihr Netzwerk erweitern, sich auf persönlicher Ebene weiterentwickeln oder sich mit Ihrem Institut verbinden.

Ziehen Sie nicht zu schnell negative Schlüsse über die Qualität des Konstrukteurs

Nachdem ein Teil der Prüfung abgelehnt wurde, ist die Versuchung groß, an den Kenntnissen des Konstrukteurs zu zweifeln. Aber ist das gerechtfertigt?

Seien Sie sich darüber im Klaren, dass die Entwicklung einer Prüfung einen anderen Denkprozess erfordert als ihre Festlegung. Der Einrichter hat die Herausforderung und den ‘Luxus’, aus der Ferne zu schauen, während der Entwickler mitten im Prozess steht und per Definition weniger objektiv schauen kann. Außerdem müssen die Konstrukteure technisch noch wachsen.

SchlussfolgerungFeedback zu den Ergebnissen und Verbesserungsvorschläge. Auf diese Weise werden wir alle ein bisschen besser und können uns weiter entwickeln.

‘Die Ermittlung erfolgt per Post, das ist viel effizienter.‘

Hand aufs Herz, wer hat das nicht schon einmal nach einer langen Besprechung gedacht?

Die Ermittlung per Post führt jedoch häufig zu folgenden Problemen:

• Der Fixierer ist weniger scharf, weil es keine Diskussion gibt.
• Wenn Uneinigkeit herrscht, ist nicht mehr klar, wie der Entscheidungsprozess verläuft und ob er noch ausgewogen ist. Dies kann zu einem langwierigeren Prozess führen. Wie also wird der Knoten schließlich geknüpft?

Anpassung? Seien Sie wachsam!

Es ist schön, wenn ein Fixer vor Ort Verbesserungen zu den eingereichten Fragen vorschlägt. Vor allem, wenn die Entwicklung unter Zeitdruck steht. Dadurch wird der Prozentsatz der abgelehnten Fragen erheblich reduziert. Wenn sich die Richtung der Frage zu sehr ändert, muss unter Umständen eine neue Frage verfasst werden, ohne dass eine gesonderte Bestimmung erfolgt. Der Vorteil, als Bestimmer die Fragen objektiv zu betrachten, geht dann verloren. Dies kann leichter zu Fehlern führen. Seien Sie also wachsam.

Erfüllt die Prüfung die Prüfungsanforderungen?

Nichts hat so schlimme Folgen wie Prüfungen, die nicht den Prüfungsanforderungen entsprechen. Wenn das Niveau zu hoch ist oder Dinge enthält, die nicht zu den Prüfungsanforderungen gehören, sinkt das Vertrauen der Schüler und anderer Beteiligter. Sie halten die Prüfung dann nicht mehr für eine faire oder gültige Messung. Konzentrieren Sie sich nicht nur auf die Details der Prüfung und des Inhalts, sondern auch auf die Prüfung als Ganzes. Im Falle der Einrichtung einer Item-Bank, in dem jede Aufgabe und nicht jede Prüfung entwickelt wurde: Prüfen Sie die Prüfung anhand einer Musterziehung. Ist die Prüfung relevant und korrekt in Bezug auf das ‘Look and Feel’?

Schlussfolgerung

Der Stellenwert, den die Fixierung bei der Erstellung von Prüfungen hat, ist sicherlich gerechtfertigt. Damit Sie nicht in die ‘Fallen’ tappen, geben wir Ihnen die folgenden praktischen Tipps:

• Trennen Sie Konstruktion und Bestimmung; schließlich beurteilt ein Metzger nicht sein eigenes Fleisch;
• Ziehen Sie nicht zu schnell negative Schlüsse über die Qualität des Konstrukteurs. Bestimmen ist einfach etwas anderes als konstruieren;
• Eine Fixierung per Post scheint ratsam, aber nicht ratsam zu sein;
• Achten Sie darauf, dass die Prüfungsfragen nicht zu sehr die Richtung wechseln. Andernfalls sollte eine neue Frage entwickelt werden, ohne dass eine separate Bestimmung erfolgt;
• Konzentrieren Sie sich nicht nur auf die technischen und inhaltlichen Details der Prüfung, sondern bewerten Sie sie als Ganzes.

Haben Sie Fragen zur Gestaltung des Prüfungsverfahrens oder möchten Sie etwas dazu sagen? Hinterlassen Sie Ihre Daten und wir werden Ihnen gerne mehr darüber erzählen.