El juicio comparativo adaptativo es una técnica tomada de la psicofísica que puede generar resultados confiables para la evaluación educativa; como tal, es una alternativa a la calificación de guiones de exámenes tradicionales. En el enfoque, a los jueces se les presentan pares de trabajos de los estudiantes y luego se les pide que elijan cuál es mejor, uno u otro. Por medio de un algoritmo iterativo y adaptativo, se puede obtener una distribución escalada del trabajo de los estudiantes sin referencia a criterios.
La corrección de guiones de exámenes tradicionales comenzó en Cambridge 1792 cuando, con el aumento del número de estudiantes universitarios, la importancia de una clasificación adecuada de los estudiantes estaba creciendo. Entonces, en 1792, el nuevo supervisor de exámenes, William Farish, introdujo la calificación, un proceso en el que cada examinador otorga una calificación numérica a cada respuesta de cada estudiante, y la calificación total general coloca a los estudiantes en el orden de clasificación final. Francis Galton (1869) señaló que, en un año no identificado alrededor de 1863, el Senior Wrangler obtuvo 7,634 de un máximo de 17,000, mientras que el Second Wrangler obtuvo 4,123. (La 'Cuchara de madera' obtuvo solo 237.)
Antes de 1792, un equipo de examinadores de Cambridge se reunió a las 5 de la tarde del último día de exámenes, revisó los 19 trabajos que cada estudiante había realizado y publicó su orden de clasificación a la medianoche. El marcado resolvió los problemas de los números y evitó los prejuicios personales injustos, y su introducción fue un paso hacia las pruebas objetivas modernas, el formato al que se adapta mejor. Pero la tecnología de pruebas que siguió, con su mayor énfasis en la confiabilidad y la automatización de la calificación, ha sido un socio incómodo para algunas áreas del logro educativo: evaluar la escritura o el habla, y otros tipos de desempeño necesitan algo más cualitativo y crítico.
La técnica del Juicio Comparativo Adaptativo es una alternativa a la calificación. Vuelve a la idea anterior a 1792 de clasificar los papeles según su calidad, pero conserva la garantía de fiabilidad y equidad. Es, con mucho, la forma más confiable conocida de calificar ensayos o representaciones más complejas [ cita requerida ] . Es mucho más simple que corregir y ha sido preferido por casi todos los examinadores que lo han probado. El verdadero atractivo del juicio comparativo adaptativo radica en cómo puede volver a profesionalizar la actividad de evaluación y cómo puede reintegrar la evaluación con el aprendizaje.
La ciencia del juicio comparativo comenzó con Louis Leon Thurstone de la Universidad de Chicago . Pionero de la psicofísica , propuso varias formas de construir escalas para medir la sensación y otras propiedades psicológicas . Uno de ellos fue la ley del juicio comparativo (Thurstone, 1927a, 1927b), [2] [3] que definió una forma matemática de modelar la probabilidad de que un objeto 'supere' a otro en una comparación, dados los valores de la 'calidad ' de cada. Esto es todo lo que se necesita para construir un sistema de medición completo.
Una variación de su modelo (ver Comparación por pares y el modelo BTL), establece que la diferencia entre sus valores de calidad es igual al logaritmo de las probabilidades de que el objeto A supere al objeto B: