¿Cuándo se considera que una prueba es de buena calidad? Los términos «validez» y «fiabilidad» son conceptos importantes a la hora de evaluar la calidad de una prueba. Sin embargo, detrás de estos términos se esconde todo un mundo. En este blog nos limitaremos al máximo denominador común. Para obtener más información sobre los conceptos de fiabilidad y validez, consulte la explicación de Sluiter, Hemker y Eggen (2018). Prueba fiable y válida Una prueba es fiable si su resultado no se basa en el azar. Esto ocurre, por ejemplo, cuando hay factores perturbadores durante la realización de la prueba o cuando hay errores en las preguntas o en su evaluación. Una prueba válida mide lo que se supone que debe medir y se ajusta al objetivo para el que se utilizan los resultados de la prueba. Un ejemplo de la aplicación de este criterio son las preguntas de examen que se ajustan a formulaciones específicas. objetivos de aprendizaje o de evaluación y en el nivel en el que se evalúa. Las quejas sobre la validez de una prueba suelen estar relacionadas con el significado que las partes interesadas otorgan a los resultados de la misma. Preguntas de examen que cumplen los criterios de calidad En resumen: una buena calidad de evaluación implica que un candidato que realmente domina la materia apruebe y que las partes interesadas tengan la sensación de que la evaluación es justa. Por lo general, se pueden obtener grandes beneficios con preguntas de examen que cumplan los criterios de calidad. Además, cumplir estos criterios suele ser bastante fácil. Por lo tanto, es importante ser consciente de estos criterios y saber aplicarlos. El técnico Los criterios utilizados se refieren a: Relevancia; Objetividad; Especificidad; Eficiencia. Relevancia (1) ¿La pregunta se ajusta a los objetivos de aprendizaje y evaluación del programa del examen? ¿Se refiere a conocimientos relevantes o se trata de detalles que nadie puede saber o que nadie utilizará jamás? La pregunta debe referirse a contenidos profesionales que sean útiles para un profesional. Un ejemplo: en un examen sobre conocimientos de productos en el comercio de alimentos, quizá sea menos importante saber de memoria el valor nutricional de la mantequilla de cacahuete. Al fin y al cabo, esta información se puede leer en la etiqueta. Objetividad (2) ¿La respuesta correcta a estas preguntas es siempre válida o hay situaciones en las que la respuesta ‘correcta’ no lo es realmente? ¿Hay otras respuestas que también se puedan considerar válidas? Una pregunta objetiva Por lo general, no da lugar a debate. Véase el siguiente ejemplo de pregunta no objetiva. ¿De qué colores es la bandera holandesa? Marca todas las respuestas correctas. Rojo Azul Blanco Naranja Respuesta correcta: A, B y C. La pregunta es si la respuesta D, naranja, tampoco debería considerarse correcta. Supongamos que la bandera tiene un banderín, entonces este es naranja. La respuesta D quizá no sea la más relevante, pero tampoco es realmente incorrecta. En cualquier caso, la pregunta puede dar lugar a debate. Especificidad (3) Una pregunta debe formularse de tal manera que alguien que domine la materia pueda responderla correctamente y alguien que no la domine no pueda hacerlo. Por lo tanto, una pregunta específica distingue entre candidatos ‘buenos’ y ‘malos’. A continuación se muestra un ejemplo de una pregunta no específica (abierta). Describe los estilos de liderazgo de una teoría de gestión ampliamente utilizada. Respuesta: En la teoría de Hersey y Blanchard se describen cuatro estilos. Descripción: Delegar: delegar tareas a los empleados, con poco control y poco apoyo.; Apoyar, consultar: ayudar a los empleados, poca dirección; Convencer, motivar: mucha orientación hacia las tareas y mucho apoyo.; Asignar tareas, dar instrucciones: mucho control, poco apoyo. Otras respuestas a criterio del corrector. El problema con esta pregunta es que no está muy bien enfocada; hay varias teorías y modelos de gestión que se aplican con frecuencia. Además, no se mencionan los requisitos que debe cumplir la descripción. De esta manera, hay muchas respuestas que deberían considerarse correctas. Eficiencia (4) Para cumplir con el criterio de eficiencia, es importante limitar la información de la pregunta a solo aquella que sea necesaria para responderla. Un ejemplo que vemos a menudo es que el texto de un caso incluye todo el artículo de un periódico como información de fondo. En ese caso, se recomienda no incluir dicha información en el examen, sino en el material didáctico. Otro ejemplo es que, al incluir una doble negación, el candidato tiene que leer la pregunta varias veces para comprenderla bien. Lo mejor es poner las negaciones en negrita o cursiva para que llamen la atención. De hecho, los errores lingüísticos y las construcciones lingüísticas complejas entran dentro del criterio de ‘eficiencia’. Conclusión En caso de buena prueba Es importante que un candidato que domine la materia apruebe y que todos los implicados tengan la sensación de que el examen es justo. Los criterios de calidad de las preguntas de examen mencionados anteriormente contribuyen a alcanzar este objetivo.
