Wie wählt man die richtige Testsoftware aus? Die Auswahl der Testsoftware ist schwierig. Es gibt viele Pakete mit unterschiedlichen Kosten, und es ist nicht immer einfach einzuschätzen, welche zukünftigen Anforderungen zu berücksichtigen sind. Die Wahl der Prüfungssoftware ist eine Entscheidung, die Sie langfristig treffen. Berücksichtigen Sie daher die spezifischen Anforderungen, die das Paket jetzt und in Zukunft erfüllen muss. Möglicherweise steigt die Anzahl der Kandidaten, Nutzer oder Prüfungsorte aufgrund interner Veränderungen. Kriterien für die Auswahl von Testsoftware Um Ihnen dabei zu helfen, darüber nachzudenken, skizzieren wir einige Punkte, die Sie beachten sollten: Technik Sicherheit (DSGVO) Rollen und Rechte Modularer Aufbau Buchen und bezahlen Benutzerfreundlichkeit Arten von Fragen Verfügbarkeit statistischer Daten Multimedia-Anwendungen Verbindung mit anderer Software Abnahmeoptionen 1. Wie ist die Technik aufgebaut? Werden mehrere Personen an verschiedenen Standorten die Testsoftware nutzen? Denken Sie dabei an Testentwickler und Bewerter von Fragen. Dies erfordert ein webbasiertes System, bei dem die Fragen an einem zentralen und gut gesicherten Ort gespeichert werden. Darüber hinaus ist es wichtig, Fragen zur Sicherheit des Systems zu stellen. Ist diese gut geregelt? Vor allem, wenn es um summative assessment betrifft, ist das wichtig. Bei Systemen, die nur für formative Tests ist diese Sicherheit nicht immer optimal. Schließlich ist es wichtig zu untersuchen, wie sich die Software verhält, wenn eine große Anzahl von Kandidaten teilnimmt. Sind die verwendeten Server dafür geeignet? 2. Ist die Software sicher (DSGVO)? Inwieweit ist das System darauf ausgelegt, die Anforderungen der DSGVO zu erfüllen? Denken Sie dabei an die Sicherheit, Speicherung und korrekte Verwendung personenbezogener Daten. Haben Personen die Möglichkeit, ihre personenbezogenen Daten einzusehen und diese zu ändern oder zu löschen? Beachten Sie diese Aspekte der Datenverarbeitung bei der Auswahl einer Testsoftware. 3. Wie sind Rollen und Rechte zu gestalten? Bei der Gestaltung von Prüfungsprozessen gibt es in der Regel unterschiedliche Zuständigkeiten und Befugnisse. Inwieweit können Sie sich mit der digitalen Prüfungssoftware daran anpassen? Dazu können Sie eine Reihe von Fragen stellen: Wer ist letztendlich für den Inhalt der Prüfungsdatenbank verantwortlich? Wer darf Fragen eingeben, überprüfen und überarbeiten? Wer darf Änderungen an den verwendeten Vorlagen vornehmen und Anpassungen auf der Ebene des gesamten Tests vornehmen? Recherchieren Sie nach geeigneter Testsoftware, legen Sie Ihre Anforderungen fest und finden Sie heraus, inwieweit das System diese erfüllt. 4. Ist die Software modular aufgebaut? Eine Frage, die Sie sich stellen können, lautet: Wie ist die Testsoftware aufgebaut? Software kann unzählige Möglichkeiten bieten, aber nutzen Sie tatsächlich alle Funktionen des Pakets? Berücksichtigen Sie bei der Auswahl der Software, wie das Paket aufgebaut ist und ob es auch möglich ist, es in Teilen oder Modulen zu verwenden. Denken Sie dabei beispielsweise an ein Modul für die Abnahme vor Ort, für die Überwachung, für die Anmeldung und Registrierung sowie ein Modul zur Analyse von Daten und zur Erstellung von Berichten. Gibt es vielleicht auch eine Möglichkeit, ein ‘leicht’-Version verwenden, beispielsweise für formative Prüfungen? 5. Ist es möglich, eine Prüfung zu buchen und zu bezahlen? Wie einfach ist es für Kandidaten, Prüfungen zu buchen, Anmeldungen zu ändern oder zu bezahlen? Gibt es Möglichkeiten, eine Verbindung zwischen einer Website und der entsprechenden Prüfungssoftware herzustellen? Und wie kann anschließend die Kommunikation mit den Kandidaten erfolgen? 6. Wie benutzerfreundlich ist die Software? Wie einfach ist es, Fragen einzugeben? Kann dies auch von relativ ungeschulten Personen durchgeführt werden? Es kann daher sehr sinnvoll sein, das Prüfungssystem für Prüfungsentwickler und Prüfer von Fragen zugänglich zu machen und den verschiedenen Gruppen unterschiedliche Rechte für die Eingabe, Überarbeitung und Festlegung zu gewähren. Darüber hinaus kann es wichtig sein, im System sichtbar zu machen, welche Fragen bereits festgelegt wurden, welche noch nicht und welche bereits überarbeitet wurden. Wie wird der Status von Fragen sichtbar gemacht? Ein weiterer wichtiger Punkt ist die Frage, welche Möglichkeiten das System zur Analyse der Ergebnisse bietet. Enthält das System bereits Formeln, mit denen p- und rit-Werte berechnet werden können, auch für andere Fragetypen als Multiple-Choice-Fragen? Einige Systeme erfordern in diesem Bereich Eigeninitiative seitens des Benutzers, während andere Systeme diese Option standardmäßig integriert haben. Schließlich profitieren Sie als Nutzer von einer übersichtlichen Struktur. Wie sind die Fragen in der Datenbank angeordnet? Ist die Struktur auf einen Blick erkennbar oder gleicht sie eher einem Puzzle? 7. Testen Sie mit offenen und/oder nur geschlossenen Fragen? Wie lässt sich der Lernstoff am besten überprüfen, mit offenen oder geschlossenen Fragen? Sie setzen offene Fragen Wenn Sie prüfen, ob ein Schüler die Antworten selbst formulieren kann, oder wenn es um eine ‘höherwertige’ Fähigkeit wie das Analysieren geht. In diesem Fall sollten Sie nach einem System suchen, das diese Möglichkeit bietet. Darüber hinaus stellt sich die Frage, inwieweit die Art der Korrektur Spielraum lässt: Ist es möglich, mehrere Korrektoren einzusetzen? Und gibt es verschiedene Möglichkeiten, um zu einer Note zu gelangen? 8. Sind statistische Daten verfügbar? Nicht jedes Testsoftwaresystem verfügt über die gleichen Möglichkeiten zur Auswertung statistischer Daten. Dazu gehören p-, rit- und a-Werte, aber auch Daten zur Bewertung durch Korrektoren und eine Darstellung der Wahrscheinlichkeit pro Frage. Manchmal benötigen Sie auch Informationen darüber, welche Kandidaten eine bestimmte Prüfungsfrage in ihrer Prüfung hatten. Dies gilt beispielsweise, wenn Sie flexible Prüfungen verwenden und im Nachhinein eine oder mehrere Fragen aus der Prüfung ausschließen möchten. 9. Ist die Wiedergabe von Multimedia-Inhalten möglich? Bei verschiedenen Fragetypen kann es sinnvoll sein, Bildmaterial in Form von Illustrationen und/oder Videos zu verwenden. Wie einfach ist es, diese in der Software zu verwenden? Welche Anforderungen gelten hinsichtlich Bildformaten und Dateigröße? 10. Sind Verknüpfungen mit anderer Software möglich? Ist eine Verknüpfung mit anderer Software zu erwarten? Dies kann der Fall sein, wenn während der Prüfung andere Programme verwendet werden müssen, beispielsweise Excel oder ein anderes Buchhaltungsprogramm. Einige Systeme bieten diese Möglichkeit. 11. Welche Abnahmemöglichkeiten gibt es? Bei schriftlicher Prüfungsdurchführung gelten ganz andere Möglichkeiten als bei der digitalen Abnahme. Inwieweit ist es notwendig, zeit- und/oder ortsunabhängig zu prüfen? Denken Sie dabei auch an die Zukunftssicherheit des Systems. Was ist, wenn die Kandidaten über das ganze Land verteilt oder vielleicht sogar im Ausland wohnen? Dann ist es ratsam, dies von Anfang an zu berücksichtigen. Berücksichtigen Sie bei den Prüfungsoptionen auch die Möglichkeiten für Legastheniker, Sehbehinderte usw. Oder die Möglichkeit, eine Prüfung offline abzulegen; es sind möglicherweise Situationen denkbar, in denen keine Internetverbindung besteht. Für welche Testsoftware entscheidest du dich? Auch wenn die Auswahl komplex ist, gibt es verschiedene Aspekte, die wichtig sind und auf denen Sie Ihre Entscheidung basieren können. Diese werden hier kurz umrissen, aber für jedes System gilt eine detaillierte Auslegung. Stellen Sie die richtigen Fragen und wählen Sie die Testsoftware, die zu Ihnen passt. Melden Sie sich für unseren Newsletter an Erfahren Sie mehr über Prüfungssoftware und digitale Prüfungen in unserem Newsletter.
