Come si valutano le domande aperte in modo oggettivo?
Un giudizio comune sulle domande a risposta aperta è che la loro valutazione è soggettiva e laboriosa.
Quindi perché usarle?
Come si fa a valutare le domande aperte in modo oggettivo?
E come puoi assicurarti che la tua valutazione sia il più possibile efficiente possibile?
In questo blog scoprirai quando una domanda a risposta aperta aggiunge valore e otterrai consigli su come evitare gli errori più comuni nella valutazione delle domande a risposta aperta.
Contenuto
Quando usi le domande a risposta aperta?
Per domande aperte si intendono quelle in cui il candidato deve formulare da solo la risposta. Le domande chiuse sono quelle in cui il candidato sceglie la risposta corretta o una combinazione di risposte tra una serie di opzioni.
Perché dovresti usare domande aperte quando puoi fare il test anche con domande chiuse?
Se è possibile farlo altrettanto bene, è consigliabile eseguire il test con domande chiuse.
Ciò presenta una serie di vantaggi, come la comodità della correzione automatica quando si utilizza un software di test digitale o la valutazione oggettiva (una risposta è giusta o sbagliata).
Tuttavia, potrebbe essere necessario utilizzare domande a risposta aperta.
Considera situazioni come:
- Il candidato viene messo alla prova sulla conoscenza attiva e sulla sua applicazione attiva.
Spesso si tratta di una situazione in cui il candidato deve essere creativo e trovare o formulare da solo la risposta.
- L’analisi o la giustificazione sono altrettanto o più importanti della risposta finale.
Questo è il caso, ad esempio, di quando si fornisce un calcolo.
- Quando una domanda chiusa diventa rapidamente una domanda “a porte aperte”.
Quando la risposta viene data, è subito chiaro che è quella giusta.
Questo significa anche che è difficile trovare risposte alternative plausibili (sbagliate).
- Diverse risposte possono essere corrette ed è impossibile dare tutte le risposte corrette.
Se si utilizzasse comunque un test chiuso in questo caso, ci si imbatterebbe proprio nel problema dell’oggettività della domanda.
- Non esistono standard fissi o norme chiare all’interno di un determinato settore.
Ad esempio, come condurre esattamente una telefonata di vendita o una conversazione come manager.
Alcune risposte sono migliori di altre, ma non immediatamente sbagliate.
Questo è difficile da misurare in una domanda a risposta chiusa.
Valutazione efficiente delle domande aperte
La valutazione delle domande aperte avviene in modo efficiente attraverso il test digitale.
Non è necessario distribuire i fogli d’esame.
Il valutatore riceve un’e-mail che gli comunica quando il foglio d’esame è pronto per lui.
Non deve sfogliare o saltare accidentalmente le domande, perché il sistema garantisce che le domande siano presentate in sequenza.
In modo ordinato, domanda e risposta sono insieme, riducendo il rischio di errori.
Inoltre, non si perde tempo se si utilizza un secondo valutatore.
Subito dopo aver completato la prima valutazione, questo secondo valutatore può ricevere un’e-mail che lo avvisa che un foglio d’esame è pronto per lui.
Valutare le domande aperte in modo oggettivo – suggerimenti
Come valutare le domande a risposta aperta in modo oggettivo?
Leggi i consigli (parziali) che seguono:
Suggerimento 1 – Sii il più specifico possibile nella formulazione della domanda
- Fai solo domande aperte, alle quali puoi rispondere in modo giusto o sbagliato.
Spesso la soluzione sta nel rendere una domanda aperta così specifica che solo chi ha imparato qualcosa o ha esperienza può rispondere.
Quindi non chiedere conoscenze generiche.
Suggerimento 2 – Non formulare risposte campione troppo rigide
- Limita il campione di risposte.
Scrivi solo ciò che deve essere necessariamente menzionato e non la risposta più perfetta.
Inoltre: se ritieni che esistano tutti i tipi di formulazioni che sono altrettanto valide, inseriscile.
Ad esempio: “Anche altre formulazioni dello stesso tenore sono considerate buone”.
- Se ritieni che si possano indicare altre risposte, oltre a quelle formulate, che non siano sbagliate, inseriscile.
Questo può essere il caso di soluzioni più creative in cui non c’è una sola, ma diverse strade che portano a Roma.
Ad esempio: “Altre risposte che saranno valutate dal correttore”.
- Consenti ai valutatori di pubblicare i commenti del correttore.
Nella valutazione digitale, questo è spesso possibile.
Il valutatore può quindi indicare dalle risposte del candidato che ha visto che l’esempio di risposta deve essere ampliato con risposte aggiuntive.
Suggerimento 3 – Lavora con recensioni positive
- Indica per cosa ricevi i punti invece che per cosa ricevi le detrazioni.
Lavorando con gli aspetti di valutazione (nei test digitali), puoi indicare questo aspetto in modo molto preciso e puoi permettere alle persone di assegnare un punteggio per ogni aspetto.
Con gli aspetti di valutazione, fornisci una breve caratterizzazione di una risposta parziale con un punteggio:
- Risposta parziale sulla caratterizzazione 1 – 1 punto
- Risposta parziale sulla caratterizzazione 2 – 1 punto
- Digitare una risposta parziale 3 – 1 punto Totale punti: 3
Suggerimento 4 – Fornisci una panoramica e una struttura
- Usa aspetti di valutazione chiari (vedi anche il suggerimento 3) per evitare confusione tra i valutatori.
- Non fare più di due “sotto-domande” in una sola domanda.
Oppure, se lo fai, lavora con
a.,
b. e
c..
Il candidato e il valutatore sapranno così quante risposte sono effettivamente richieste.
Oppure: fai altre domande su questo argomento.
Suggerimento 5 – Evita le sovrapposizioni nel modello di risposta
- Guarda con occhio critico le “risposte campione” e non chiedere troppo.
Si sovrappongono?
Allora riduci il numero di risposte da dare.
Ad esempio: Se ci sono tre ragioni, di cui due si sovrappongono, chiedine due e non tre.
Poi inserisci le tre ragioni nel modello di risposta.
- Utilizza gli aspetti di valutazione.
Inoltre, può anche aiutare a indicare cosa non deve essere conteggiato correttamente.
Suggerimento 6 – Fai attenzione all’effetto corno e all’effetto alone
- All’effetto Effetto corno l’opinione generale di un candidato pesa negativamente sul punteggio.
Con un Effetto alone al contrario, è positivo.
Conseguenza: il valutatore assegna troppi o troppo pochi punti.
- Usa la valutazione segmentata.
Nella valutazione segmentata, un valutatore controlla prima tutte le domande “1” e poi tutte le domande “2” e così via.
In questo modo viene a mancare la visione complessiva di come il candidato sta “facendo”.
- Assicurati che il punteggio finale del candidato (nei test digitali) non sia visibile.
Se un valutatore vede che un punto in più potrebbe risultare in una sufficienza, potrebbe essere tentato di aggiungere un altro punto da qualche parte.
Poiché l’obiettivo è quello di dare una valutazione per domanda (e non il punteggio finale), è meglio tenere nascosto il punteggio totale.
Consultazione con i revisori
Un’osservazione generale per migliorare la valutazione delle domande aperte è la consultazione regolare dei valutatori.
Cosa notano loro?
Cosa noti tu?
In risposta a reclami e obiezioni, fornisci esempi di errori di valutazione e discuti insieme come evitarli.
Conclusione
Ci sono buone ragioni per le domande aperte e, nonostante gli svantaggi, ci sono (soprattutto con la valutazione digitale) numerose misure che puoi adottare per garantire che le domande aperte possano essere valutate in modo efficiente e oggettivo.
Naturalmente rimane un lavoro umano, ma non è forse questo che vogliamo?
Dai la tua opinione o scopri di più? Allora contattaci.