Exámenes adaptativos: Pruebas a la medida del estudiante

Todos hemos presentado un examen que nos parece demasiado difícil y, por lo tanto, no podemos dar con las respuestas correctas; también ocurre lo opuesto: que el examen es demasiado fácil y nos puede parecer aburrido. En este sentido, sería ideal tener exámenes con una dificultad cercana a los conocimientos y habilidades de cada evaluado o sustentante, lo cual es posible si se utiliza una Prueba Adaptativa Computarizada (PAC).

Conocidas en inglés como Computerized Adaptive Test (CAT), este tipo de pruebas generalmente inician con preguntas de dificultad media con los que se estima una habilidad preliminar de los evaluados. Conforme estos van contestando los reactivos, se van presentando unos más y otros menos difíciles; es decir, el examen se va adaptando a la habilidad de cada persona.

El concepto de las PAC se originó en los años setenta con el trabajo pionero de Frederic Lord, quien ideó su estructura teórica; pero no fue hasta la década de los ochenta, con el desarrollo de las computadoras, cuando se pudieron explorar los modelos adaptativos y se demostró que era posible evaluar a los individuos con precisión disminuyendo el número de preguntas, ahorrando tiempo y reduciendo el cansancio de los evaluados. Una de las primeras aplicaciones de las PAC la hizo el Departamento de Defensa de Estados Unidos en la Batería de Aptitud Vocacional de las Fuerzas Armadas. Desde entonces, su uso se ha extendido, principalmente en el campo educativo, pero también en el laboral.

El marco estadístico más utilizado por las PAC es la teoría de respuesta al ítem, que modela la relación entre la habilidad del evaluado y su desempeño en el examen; asume que la probabilidad de contestar correctamente está dada por una función del nivel de habilidad del individuo y de las características del reactivo, como su dificultad y poder de discriminación. Este enfoque permite mejorar la eficiencia y precisión de la evaluación.

Eficacia del modelo
Dado que a cada persona se le proporciona una versión de examen adaptada a sus capacidades, se reduce la posibilidad de hacer trampa, además de que se disminuye la exposición de los reactivos y se favorece la integridad de los exámenes.

Tales han sido la eficacia y las ventajas que han demostrado los modelos adaptativos que actualmente varias pruebas educativas aplicadas a gran escala los están implementando, ya sea en la totalidad del examen o en algunas de sus secciones; por ejemplo, el Graduate Management Admission Test, utilizado para la admisión a programas de posgrado en negocios; el Graduate Record Examinations, que también se aplica para ingresar a programas de posgrado, principalmente en negocios y leyes; el Test of English as a Foreign Language, conocido como TOEFL, uno de los exámenes más usados para medir el nivel de dominio del idioma inglés; el Programme for International Student Assessment (PISA), la prueba internacional más grande del mundo que evalúa los sistemas educativos de los países, y recientemente el SAT, una de las pruebas de ingreso a la universidad más reconocidas.

Para implementar una prueba adaptativa con calidad es importante contar con un banco de reactivos robusto, con características psicométricas adecuadas, que cubra todos los temas del examen. Además, se requiere de algoritmos bien diseñados y probados, con reglas claras de inicio, de selección de las siguientes preguntas y de finalización de la prueba. Asimismo, es necesario disponer de una infraestructura tecnológica avanzada que permita resguardar la información, hacer los cálculos necesarios y aplicar las reglas de decisión al momento.

Asimismo, es importante que de forma previa a su aplicación se atiendan las inquietudes de las instituciones y personas que solo están familiarizadas con los métodos tradicionales de evaluación, proporcionándoles información sobre el funcionamiento y los beneficios de las PAC, entre los cuales destacan los siguientes:
• Evaluaciones más personalizadas.
• Menor tiempo de aplicación.
• Menor estrés y la fatiga de los sustentantes.
• Mayor precisión en la medición.
• Menor exposición de las preguntas.
• Menor posibilidad de copia entre sustentantes.

Por lo anterior, es de esperar que el uso de las PAC siga expandiéndose. En el Ceneval, actualmente se están generando y probando varios algoritmos y está en desarrollo la tecnología necesaria para ofrecer algunas de sus pruebas en su versión adaptativa.