Educación Abierta Y A Distancia

Universidad Nacional Abierta Dirección de Investigaciones y Postgrado

CAPÍTULO 5: LA EVALUACIÓN DE LAS PRUEBAS DE EVALUACIÓN

Bertoni, A., Poggii, M. y Teobaldo, M. (1999) Evaluación nuevos significados para una práctica compleja. Argentina: Kapelusz (Compilación con fines instruccionales)

LA EVALUACIÓN DE LAS PRUEBAS DE EVALUACIÓN

69

La evaluación de las pruebas de evaluación
Eltérmino metaevaluación designa un concepto que introdujo Scriven (1968) para referirse a la necesidad de evaluar cada etapa del plan de evaluación, incluyendo los instrumentos utilizados. Una vez concluido el proceso de análisis de los resultados de las pruebas, es importante iniciar la evaluación de cada uno de los instrumentos administrados. Consideramos conveniente subrayar la importancia de laevaluación de los instrumentos de evaluación, dado que el análisis cualitativo de los resultados privilegia, por su importancia pedagógica, el momento de la devolución y la construcción continua de una validez consensuada entre los actores involucrados en la evaluación. La expresión “análisis de ítems” se refiere habitualmente a cuestiones propias de las pruebas objetivas, pero no hay razón paraque tal procedimiento no pueda aplicarse también a los ítems de respuesta abierta. En preguntas de respuesta breve, las que requieren palabras, frases, enunciados que expresen un hecho o una idea, el procedimiento analítico es semejante al de las que exigen una opción verdadero/falso o las de selección múltiple. Cuando el problema o la pregunta requieren respuesta extensa, la decisión delevaluador de otorgar el puntaje correspondiente a “correcta” o no es más compleja, pero puede hacerse, aunque con otros requisitos. En efecto, es más difícil lograr el grado de formalización exigido por el análisis de ítems cuando no se trata de pruebas objetivas. Sin embargo, es posible hacerlo con la consistencia interna que requiere la corrección de una prueba. En este sentido, cuando se construye elsistema compuesto por claves de corrección adecuadas y por criterios de valoración que corresponde a ellas, se puede alcanzar el grado de formalización que permita hacer un riguroso análisis de ítems. Por esta razón, sostenemos que el conjunto formado por las pruebas de evaluación administradas, los resultados registrados según claves de corrección y el esquema de valoración explicitado implican un70

ALICIA BERTONI- MARGARITA POGGI – MARTA TEOBALDO

progreso en la formalización de los procedimientos analíticos al utilizar otro tipo de ítems que los que son propios de las denominadas pruebas objetivas. Independientemente de la extensión de las respuestas se ha podido detectar los aciertos y los errores más frecuentes de los alumnos con procedimientos de mayor complejidad que loscorrespondientes al examen de las opciones “correcta” y “errónea” de las pruebas de selección múltiple. Es necesario extenderse sobre las características técnicas que presentaron las pruebas. LA CONFIABILIDAD DE LA PRUEBAS DE EVALUACIÓN La eficacia de un aprueba se estima en términos de la confiabilidad y validez que ella posee. Estos conceptos plantean determinados problemas que se resuelven dediferente forma cuando el enfoque de la evaluación es cuantitativo o cualitativo. La confiabilidad en estudios cuantitativos En este caso, la confiabilidad se define como el grado de precisión con que un instrumento es capaz de suministrar información. La determinación de la confiabilidad de una prueba se realiza comparándola con ella misma o con otra de forma equivalente. En cada aplicación de ellase obtiene una medida del atributo, o atributos, que posee cada miembro de un grupo de alumnos Cada medida identifica la posición de cada uno de ellos con respecto a su grupo en función del atributo medido. La consistencia con que mantiene su posición de una medición a otra refleja la confiabilidad de la prueba. Si una misma cosa puede tener medidas diferentes, es que obedece a un instrumento...