Optimum Assessment Platform: Das Gesamtpaket für digitales Prüfen
Die Wahl der Prüfsoftware ist eine knifflige Angelegenheit. Es gibt viele Pakete mit unterschiedlichen Kosten, und es ist nicht immer leicht abzuschätzen, welche künftigen Anforderungen Sie berücksichtigen müssen. Die Wahl der Prüfsoftware ist eine Entscheidung, die Sie langfristig treffen. Betrachten Sie dann auch die spezifischen Anforderungen, die das Paket jetzt und in Zukunft erfüllen soll. Vielleicht erhöht sich die Zahl der Kandidaten oder die Zahl der Benutzer oder Teststandorte aufgrund interner Änderungen.
Um Ihnen bei Ihren Überlegungen zu helfen, stellen wir Ihnen einige interessante Punkte vor:
Werden mehrere Personen an verschiedenen Standorten mit der Prüfsoftware arbeiten? Berücksichtigen Sie Testkonstrukteure und Fragenüberprüfer. Hierfür ist ein webbasiertes System erforderlich, bei dem die Fragen an einem zentralen und gut gesicherten Ort gespeichert werden. Es ist auch wichtig, Fragen über die Sicherheit des Systems zu stellen. Ist sie gut geregelt? Dies ist besonders wichtig, wenn es um eine summative Bewertung geht. Bei Systemen, die nur für formative Tests geeignet sind, ist diese Sicherheit nicht immer optimal. Schließlich ist es wichtig zu untersuchen, wie sich die Software verhält, wenn eine große Anzahl von Kandidaten teilnimmt. Sind die verwendeten Server dafür geeignet?
Inwieweit ist das System so ausgestattet, dass es den Anforderungen des AVG entspricht? Bedenken Sie die Sicherheit, Speicherung und ordnungsgemäße Verwendung personenbezogener Daten. Haben die Betroffenen die Möglichkeit, ihre persönlichen Daten einzusehen und können sie geändert oder gelöscht werden? Beachten Sie diese Aspekte der Datenverarbeitung bei der Auswahl der Prüfsoftware.
Die Gestaltung von Prüfungsverfahren beinhaltet in der Regel unterschiedliche Zuständigkeiten und Befugnisse. Inwieweit können Sie digitale Prüfsoftware einsetzen, um dies zu erreichen? Hier können Sie eine Reihe von Fragen stellen:
Wenn Sie eine geeignete Prüfsoftware suchen, sollten Sie Ihre Anforderungen kennen und herausfinden, inwieweit das System diese erfüllt.
Eine Frage, die Sie sich stellen können, ist: Wie ist die Prüfsoftware aufgebaut? Eine Software kann aus einer Vielzahl von Funktionen bestehen, aber nutzen Sie auch wirklich alle Funktionen des Pakets? Achten Sie bei der Auswahl der Software darauf, wie das Paket aufgebaut ist und ob es auch in Teilen oder Modulen genutzt werden kann.
Denken Sie zum Beispiel an ein Modul für die Probenahme vor Ort, für die Überwachung, für die Erfassung und Registrierung sowie an ein Modul für die Datenanalyse und die Erstellung von Berichten. Gibt es vielleicht auch die Möglichkeit, eine „Light“-Version zu verwenden, zum Beispiel für formative Tests?
Wie einfach ist es für die Kandidaten, Prüfungen zu buchen, Einträge zu ändern oder zu bezahlen? Gibt es Möglichkeiten, eine Website mit der entsprechenden Prüfsoftware zu verknüpfen? Und wie ist dann die Kommunikation mit den Bewerbern möglich?
Wie einfach ist es, Fragen einzugeben? Kann dies auch von relativ ungeschulten Personen durchgeführt werden? Es kann dann sehr sinnvoll sein, das Testsystem für Testkonstrukteure und Fragenreviewer zugänglich zu machen und verschiedenen Gruppen unterschiedliche Rechte zur Eingabe, Überarbeitung und Festlegung zu geben. Darüber hinaus kann es wichtig sein, im System sichtbar zu machen, welche Fragen bereits ermittelt wurden, welche nicht und welche bereits überarbeitet wurden. Wie wird der Status von Abfragen sichtbar? Ein weiterer Punkt, der zu berücksichtigen ist, ist die Fähigkeit des Systems, die Ergebnisse zu analysieren. Enthält das System bereits Formeln zur Berechnung von p- und Trip-Werten, auch bei anderen Fragetypen als Multiple-Choice? Einige Systeme setzen die Selbstkompetenz des Benutzers in diesem Bereich voraus, während bei anderen diese Option standardmäßig integriert ist.
Und schließlich profitieren Sie als Nutzer sehr von einer übersichtlichen Struktur. Wie sind die Fragen in der Datenbank angeordnet? Erkennen Sie die Struktur sofort oder wirkt sie eher wie ein Puzzle?
Wie lässt sich das Thema am besten testen, mit offenen oder geschlossenen Fragen? Sie setzen offene Fragen ein, wenn Sie testen wollen, ob ein Schüler die Antworten selbst formulieren kann, oder wenn es um eine „übergeordnete“ Fähigkeit wie die Analyse geht. Sobald dies der Fall ist, sollten Sie sich nach einem System umsehen, das diese Möglichkeit bietet. Es stellt sich auch die Frage, inwieweit die Korrekturmethode Raum lässt: Ist es möglich, mehrere Korrektoren zu verwenden? Und gibt es verschiedene Möglichkeiten, diese Zahl zu ermitteln?
Nicht jedes Prüfsoftwaresystem verfügt über die gleichen Möglichkeiten, statistische Daten zu destillieren. Berücksichtigen Sie p-, trip- und a-Werte sowie Daten über die Bewertung durch Korrektoren und eine Anzeige der Wahrscheinlichkeit des Erratens pro Frage. Manchmal benötigen Sie auch Informationen darüber, welche Kandidaten eine bestimmte Prüfungsfrage in ihrer Prüfung hatten. Dies gilt z. B., wenn Sie flexible Tests verwenden und eine oder mehrere Fragen nachträglich von der Prüfung ausschließen möchten.
Bei verschiedenen Fragetypen kann es sinnvoll sein, visuelles Material in Form von Illustrationen und/oder Videos zu verwenden. Wie einfach ist es, dies in der Software zu nutzen? Welche Anforderungen in Bezug auf Bildformate und Dateigrößen gelten für sie?
Ist zu erwarten, dass Schnittstellen zu anderer Software erforderlich sein werden? Dies kann ein Problem darstellen, wenn während der Prüfung andere Programme verwendet werden müssen, z. B. Excel oder ein anderes Buchhaltungsprogramm. Bei einigen Systemen ist dies möglich.
Für schriftliche Prüfungen gelten ganz andere Möglichkeiten als für digitale Prüfungen. Inwieweit ist es notwendig, unabhängig von Zeit und/oder Ort zu prüfen? Denken Sie auch an die Zukunftssicherheit des Systems. Was ist, wenn die Bewerber im ganzen Land oder vielleicht sogar im Ausland leben? Dann ist es ratsam, dies von Anfang an zu berücksichtigen. Prüfen Sie auch die Optionen für Legastheniker, Sehbehinderte usw. Oder auf die Möglichkeit, eine Prüfung offline abzulegen; es sind Situationen denkbar, in denen es keine Internetverbindung gibt.
Auch wenn die Auswahl komplex ist, gibt es einige wichtige Aspekte, auf die Sie sich bei Ihrer Wahl stützen können. Diese sind in einer Nussschale genannt, aber für jedes System gilt eine detaillierte Interpretation. Stellen Sie die richtigen Fragen und wählen Sie die für Sie geeignete Prüfsoftware aus.
Erfahren Sie mehr über Testsoftware und digitale Tests in unserem Newsletter.
Sie können uns gerne unter 013 – 528 63 63 kontaktieren.
