¿Qué diferencias hay entre el diseño de pruebas de forma fija y el adaptativo?
Existen dos diseños fundamentales de pruebas en la evaluación de la competencia lingüística: Las pruebas de forma fija y las pruebas adaptativas. En una prueba de forma fija, cada examinando recibe los mismos ítems (es decir, las mismas preguntas) en papel o por ordenador. Un test adaptativo sólo puede realizarse en un ordenador. El algoritmo informático puntúa cada ítem a medida que el examinando lo responde y, a continuación, basándose en la puntuación de ese ítem o grupo de ítems, ajusta el nivel del siguiente ítem o grupo de ítems al siguiente nivel de "desafío". Hasta la era de los ordenadores, no era posible realizar pruebas adaptativas de competencia lingüística a gran escala. Todavía no es posible aplicar a gran escala el diseño de pruebas adaptativas informatizadas para las pruebas de expresión oral y escrita, aunque el aprendizaje artificial podría cambiar esta situación en breve. Pero ahora es bastante fácil y común utilizar pruebas adaptativas para las pruebas de lectura y comprensión oral.
¿Cuáles son las ventajas de las pruebas de competencia lingüística adaptativas?
Las pruebas adaptativas de competencia lingüística tienen muchas ventajas. Dado que el nivel de dificultad de los ítems se ajusta al nivel demostrado por el examinando, éste se ve constantemente desafiado por los ítems sin sentirse abrumado por los excesivamente difíciles ni aburrido por los fáciles. Con un test adaptativo, el evaluado puede ascender a lo más alto de la escala en función de su rendimiento. En un test adaptativo, los examinandos seguirán distintos caminos a lo largo de la prueba, de modo que es mucho más difícil hacer trampas (sí, ocurren en todas partes). Dado que el algoritmo adaptativo se centra rápidamente en el nivel real de la persona que realiza la prueba, es capaz de ofrecer más elementos a través de una amplia gama de niveles que están en o cerca de la habilidad de la persona que realiza la prueba, lo que aumenta la confianza en que la puntuación final es exacta, todo ello en un período de tiempo más corto que una prueba de forma fija. En Avant STAMPtambién utilizamos la puntuación de lectura adaptativa para determinar el nivel de las preguntas que ofrecemos para las preguntas de escritura, y la puntuación de comprensión oral adaptativa del mismo modo para las preguntas de expresión oral, lo que hace que las secciones productivas sean semiadaptativas y estén niveladas de forma más adecuada para cada examinando.
¿Qué es un test multietapa adaptativo por ordenador (CAMST)?
Una estrategia de diseño de pruebas que Avant adoptó desde el principio es el diseño de la Prueba Multietapa Adaptativa por Ordenador (CAMST), cuyo pionero fue el Dr. Rick Leucht, catedrático de Metodología de la Investigación Educativa de la Universidad de Carolina del Norte en Greensboro. El CAMST combina las ventajas de los tests adaptativos y de los de forma fija alineando una sucesión de mini tests de forma fija. Después de cada prueba, los examinandos ascienden, descienden o permanecen en el mismo nivel en función de su rendimiento. En un test adaptativo puramente por ítem, una persona desciende de nivel si se equivoca en un solo ítem. En cada testlet, agrupamos una mezcla de temas y dificultades de los ítems para que el algoritmo adaptativo sea más preciso y eficiente a lo largo del test. Puede obtener más información sobre el algoritmo CAMST de Avant STAMP en este enlace: Computer Adaptive Multi-Stage Test Design.
Pruebas lingüísticas de formato fijo y tecnología
Las pruebas de forma fija se basan en tecnología más antigua o menos sofisticada y presentan una serie de deficiencias, algunas de las cuales ya he mencionado. Para evaluar una amplia gama de niveles lingüísticos, es necesario disponer de ítems que cubran toda la gama de niveles, pero esto significa que la prueba se hace muy larga y que los estudiantes de niveles más bajos se enfrentarán a ítems que les abrumarán y que los estudiantes de niveles más altos a menudo se aburrirán o no se sentirán desafiados por el contenido. Como solución de compromiso, para evitar estos problemas, a veces se pide a los profesores que seleccionen el nivel del formulario que realizarán sus alumnos, lo que pone un tope a su rendimiento.
Sin embargo, los tests de forma fija tienen sus ventajas. Como todos los participantes reciben los mismos ítems, se puede controlar la combinación de temas. También es más fácil realizar el análisis psicométrico (estadístico) de los ítems de los tests de forma fija que de los tests adaptativos por algunas razones bastante técnicas. Aquí tienes un artículo de Wikipedia sobre los tests adaptativos informatizados que aborda esta cuestión si eres un auténtico empollón de los tests como algunos de nosotros. Sigue este enlace para saber más sobre los tests adaptativos informatizados.
Avant utiliza el diseño de pruebas adaptativas CAMST en todas sus pruebas de aptitud lingüística. Creemos firmemente en su capacidad para ofrecer resultados precisos y crear una experiencia de examen agradable para los estudiantes de idiomas.
