¿Son precisos y fiables sus datos de evaluación lingüística?
El valor de los conocimientos lingüísticos es cada vez mayor.
Tanto los estudiantes como los educadores están descubriendo que las personas que pueden demostrar competencia en más de un idioma mejoran sus posibilidades de acceder a la universidad, conseguir un buen empleo y aumentar su potencial de ingresos. La evaluación es el medio más eficaz para determinar la competencia lingüística.
Cuando se confía en una evaluación de conocimientos lingüísticos, ¿cómo saber si sus resultados son precisos y fiables? Resulta que no todas las evaluaciones son iguales.
Por qué son importantes la precisión y la fiabilidad de la evaluación lingüística.
Los datos de las evaluaciones y los resultados de las competencias suelen ser la base:
- Índices de calidad de los programas lingüísticos
- Decisiones sobre la financiación de programas
- Contratación y ascensos del personal
- Credenciales como los sellos estatal y mundial de analfabetismo
- Créditos universitarios
- Progreso de cada alumno
Independientemente de la evaluación que se utilice, es esencial que los estudiantes de idiomas y sus programas de confianza estén seguros de que las puntuaciones que reciben son precisas y fiables. Cuando varias evaluaciones evalúan las mismas destrezas, ¿en qué se diferencian? O, ¿qué hace que una sea mejor que otra?
Las prácticas comunes dentro de un programa, o incluso dentro del campo de la enseñanza de idiomas, pueden acordar una práctica de evaluación y considerar que sus resultados son adecuados. Sin embargo, es posible que las evaluaciones no cumplan ciertos requisitos de precisión y fiabilidad. Si un termómetro inexacto indica que tiene fiebre pero no es así, puede acabar tomando medicación para un diagnóstico equivocado.
La precisión y la fiabilidad importan cuando pueden ser decisivas a la hora de conceder una credencial por conocimientos lingüísticos, la decisión de una empresa de contratar o la financiación o no de un programa.
¿Cómo saber si las puntuaciones son exactas y fiables?
Una reciente investigación de Avant sobre la calificación de las secciones Writing y Speaking de las evaluaciones de Avant STAMP demuestra cómo Avant aplica rigurosos estándares y controles de calidad de calificación para lograr un alto grado de precisión y fiabilidad en los más de 40 idiomas que evalúa. La investigación examinó los siguientes componentes:
- Formación de evaluadores
- El proceso de calificación, utilizando calificadores humanos y los procedimientos cuando dos calificadores no están de acuerdo en una calificación.
- Cómo se determina la puntuación final
- Las siguientes medidas estadísticas:
- Acuerdo exacto
- Acuerdo exacto + adyacente
- Kapp cuadrático ponderado (QWK)
- Diferencia de medias estandarizada (DME)
- Correlación de rango de Spearman (p)
- 2 STAMP Levels Apart (una medida de acuerdo no adyacente)
Estas medidas pueden triangularse para garantizar el mayor grado posible de precisión y fiabilidad en los resultados de Avant STAMP .
Los resultados muestran que, en todos los niveles, la calificación de las respuestas escritas y orales de Avant STAMP 4S y STAMP WS es altamente consistente. El American Council on Education (ACE) ha llevado a cabo una revisión exhaustiva de los procesos de calificación, precisión y fiabilidad de Avant. Basándose en su revisión, el ACE recomienda Avant STAMP para la obtención de créditos universitarios. Para obtener más detalles estadísticos sobre la precisión y fiabilidad de la calificación de Avant de las respuestas de expresión oral y escrita, lea el informe completo sobre la precisión y fiabilidad de la calificación de Avant de las respuestas de expresión oral y escrita de STAMP .
Verificar la precisión y fiabilidad de la calificación en una prueba de competencia lingüística es de vital importancia a la hora de evaluar si la prueba es adecuada para su programa. A medida que aumenta la importancia de comprobar y documentar los conocimientos lingüísticos, la pregunta es: ¿puede permitirse el lujo de no hacerlo?
Artículos que también te pueden gustar:
Descubra el potencial de sus programas lingüísticos con Avant STAMP DataLos datos son la clave del dominio de un idiomaFiabilidad y validez de las pruebas