¿Cómo se evalúan objetivamente las preguntas abiertas?
Un veredicto general sobre las preguntas abiertas es que su evaluación es subjetiva y laboriosa. Entonces, ¿por qué utilizarlas? ¿Cómo se evalúan objetivamente las preguntas abiertas? Y cómo asegurarse de que su evaluación es tan de la forma más eficaz posible? En este blog, leerá cuándo una pregunta abierta añade valor y obtendrá consejos sobre cómo evitar errores comunes al evaluar preguntas abiertas.
Contenido
¿Cuándo utilizar preguntas abiertas?
Las preguntas abiertas son aquellas en las que el candidato debe formular la respuesta por sí mismo. Las preguntas cerradas son aquellas en las que el candidato elige la respuesta correcta o una combinación de respuestas entre varias opciones.
¿Por qué utilizar preguntas abiertas cuando también se pueden realizar pruebas con preguntas cerradas? Si es así, se recomienda realizar las pruebas con preguntas cerradas. De hecho, esto tiene una serie de ventajas, como la comodidad de la corrección automática cuando se utiliza un software de pruebas digitales o la evaluación objetiva (una respuesta es correcta o incorrecta).
Aun así, puede ser necesario utilizar preguntas abiertas. Piensa en situaciones como:
- El candidato se examina sobre conocimientos activos y su aplicación activa. A menudo se trata de una situación en la que el candidato tiene que ser creativo e idear/formular él mismo la respuesta.
- El análisis o razonamiento es tan importante o más que la respuesta final. Este es el caso, por ejemplo, cuando se da un cálculo.
- Cuando una pregunta cerrada se convierte rápidamente en una pregunta «a puerta abierta». Cuando se da la respuesta, pronto queda claro que es la correcta. Esto también significa que es difícil encontrar respuestas alternativas plausibles (erróneas).
- Varias respuestas pueden ser correctas y es imposible dar todas las respuestas correctas. En ese caso, ¿se utilizarían pruebas cerradas de todos modos? Entonces te encuentras precisamente con el problema de la objetividad de la pregunta.
- No existen estándares ni normas claras dentro de un sector concreto. Por ejemplo: cómo dirigir exactamente una llamada de ventas o una conversación como directivo. Algunas respuestas son mejores que otras, pero no inmediatamente erróneas. Esto es difícil de medir en una pregunta cerrada.
Evaluación eficaz de las preguntas abiertas
La evaluación de las preguntas abiertas se lleva a cabo eficazmente mediante la evaluación digital. Esto se debe a que no es necesario distribuir los trabajos de examen. Un evaluador recibe un correo electrónico en el que se le informa de qué trabajos de examen están listos para él. No tiene que desplazarse y no se salta preguntas accidentalmente, ya que el sistema garantiza que las preguntas se presenten secuencialmente. De forma ordenada, pregunta y respuesta van juntas, lo que reduce el riesgo de errores. Además, no se pierde tiempo si se recurre a un segundo evaluador. Inmediatamente después de completar la primera evaluación, este segundo evaluador puede recibir un correo electrónico notificándole que tiene lista una hoja de examen.
Consejos para evaluar objetivamente las preguntas abiertas
¿Cómo se evalúan objetivamente las preguntas abiertas? Lea los consejos (parciales) a continuación:
Consejo 1 – Sea lo más específico posible en el enunciado de la pregunta
- Haz sólo preguntas abiertas, que puedan responderse bien o mal. La solución suele estar en hacer una pregunta abierta tan específica que sólo pueda responderla alguien que haya aprendido sobre el tema o tenga experiencia. Así que no pidas conocimientos generales.
Consejo 2 – No formule respuestas tipo demasiado estrictas
- Limite la muestra de respuesta. Escriba en él sólo lo que debe mencionarse necesariamente y no la respuesta más perfecta. Más aún: si cree que hay todo tipo de fórmulas que también son buenas, póngalo.
Por ejemplo: «Otras frases con el mismo tenor también se cuentan bien».
- Si crees que puede haber otras respuestas además de las formuladas que no sean erróneas, ponlo. Este puede ser el caso de soluciones más creativas en las que no hay uno, sino varios caminos que llevan a Roma. Por ejemplo: «Otras respuestas a discreción del corrector».
- Permitir que los revisores publiquen comentarios correctores. En las pruebas digitales, esto suele ser posible. A continuación, el evaluador podrá indicar, a partir de las respuestas del candidato, que ha visto que es necesario ampliar la respuesta de muestra con respuestas adicionales y complementarias.
Consejo 3 – Trabajar con críticas positivas
- Indique por qué obtiene puntos en lugar de por qué se le descuentan. Al trabajar (en las pruebas digitales) con aspectos de evaluación, puede indicarlo con mucha precisión y puede hacer que se puntúe cada aspecto. Para los aspectos de evaluación, caracterice brevemente una respuesta parcial con una asignación de puntos:
- Caracterización respuesta parcial 1 – 1 punto
- Caracterización respuesta parcial 2 – 1 punto
- Caracterización respuesta parcial 3 – 1 punto
Total de puntos: 3
Consejo 4 – Proporcione una visión de conjunto y una estructura
- Utilice aspectos de evaluación claros (véase también el consejo 3) para evitar confusiones entre los evaluadores.
- No formule más de dos «subpreguntas» en una misma pregunta. O, si lo hace, trabaje con a., b. y c. preguntas. El candidato y el evaluador sabrán entonces cuántas respuestas deben darse realmente. O bien: haga más preguntas sobre el tema.
Consejo 5 – Evitar solapamientos en el modelo de respuesta
- Fíjate bien en los «ejemplos de respuestas» y no pidas demasiado. ¿Se solapan? A continuación, ajuste a la baja el número de respuestas que debe dar. Por ejemplo: Si hay tres motivos, con dos que se solapan, pide dos y no tres. A continuación, ponga las tres razones en la plantilla de respuesta.
- Utilizar aspectos de evaluación. Además, también puede ayudar a indicar lo que no debe contarse correctamente.
Consejo 6 – Estar atento al efecto Cuerno y Halo
- En el
Efecto cuerno
la opinión general de un candidato pesa negativamente en la puntuación. Con un
efecto Halo
es realmente positivo. Consecuencia: el evaluador concede demasiados o muy pocos puntos.
- Utilice la evaluación segmentada. En la evaluación segmentada, un evaluador comprueba primero todas las preguntas «1» y, a continuación, todas las preguntas «2», y así sucesivamente. De este modo se pierde la visión de conjunto de cómo «lo hace» un candidato.
- Asegúrese de que la puntuación final de un candidato (en las pruebas digitales) no sea visible. Cuando un evaluador ve que un punto extra puede llevarle a aprobar, puede verse tentado a añadir otro punto en algún sitio. Dado que el objetivo es dar una opinión por pregunta (y no sobre la puntuación final), es mejor mantener oculta la puntuación total.
Consulta con los revisores
Una observación general para mejorar la evaluación de las preguntas abiertas es la consulta periódica a los evaluadores. ¿En qué se fijan? ¿Qué le llama la atención? En respuesta a las quejas y objeciones, dar ejemplos de errores de evaluación y discutir juntos cómo evitarlos.
Conclusión
Hay buenas razones para hacer preguntas abiertas y, a pesar de los inconvenientes, existen (especialmente con las pruebas digitales) numerosas medidas que puede adoptar para garantizar que las preguntas abiertas puedan evaluarse de forma eficaz y objetiva. Sigue siendo un trabajo humano, por supuesto, pero ¿no es eso también lo que queremos? ¿Da tu opinión o sabes más? Póngase en contacto con nosotros.
