Czy Twoje dane dotyczące oceny języka są dokładne i wiarygodne?

Wartość umiejętności językowych rośnie.

Zarówno uczniowie, jak i nauczyciele odkrywają, że osoby, które mogą wykazać się biegłością w więcej niż jednym języku, zwiększają swoje szanse na przyjęcie na studia, zdobycie dobrej pracy i zwiększenie potencjału zarobkowego. Ocena jest najskuteczniejszym sposobem określania biegłości.

Kiedy polegasz na ocenie biegłości językowej, skąd wiesz, że jej wyniki są dokładne i wiarygodne? Okazuje się, że nie wszystkie oceny są sobie równe.

Dlaczego dokładność i wiarygodność oceny językowej ma znaczenie.

Dane z oceny i wyniki biegłości są często podstawą:

  • Oceny jakości programów językowych
  • Decyzje dotyczące finansowania programu
  • Zatrudnianie i awansowanie pracowników
  • Poświadczenia, takie jak stanowe i globalne pieczęcie dwujęzyczności
  • Kredyt studencki
  • Postępy poszczególnych uczniów

Niezależnie od tego, jaka ocena jest stosowana, ważne jest, aby osoby uczące się języka i ich zaufane programy miały pewność, że otrzymane wyniki są dokładne i wiarygodne. Kiedy różne oceny testują te same umiejętności, co je wyróżnia? Albo, co sprawia, że jedna jest lepsza od drugiej?

Wspólne praktyki w ramach programu, a nawet w dziedzinie nauczania języków obcych, mogą uzgodnić praktykę oceny i uznać jej wyniki za odpowiednie. Jednak oceny mogą nie spełniać pewnych wymagań dotyczących dokładności i wiarygodności. Jeśli niedokładny termometr wskazuje, że masz gorączkę, ale tak nie jest, możesz skończyć przyjmując leki na niewłaściwą diagnozę.

Dokładność i niezawodność mają znaczenie, gdy mogą decydować o przyznaniu poświadczenia umiejętności językowych, decyzji firmy o zatrudnieniu lub o tym, czy program zostanie sfinansowany, czy nie.

Jak sprawdzić, czy wyniki są dokładne i wiarygodne?

Ostatnie badania Avant dotyczące oceny sekcji pisania i mówienia w ocenach Avant STAMP pokazują, w jaki sposób Avant stosuje rygorystyczne standardy i kontrole jakości oceny, aby osiągnąć wysoki stopień dokładności i niezawodności we wszystkich ponad 40 językach testowanych przez Avant. W badaniu przeanalizowano następujące elementy:

  • Szkolenie dla oceniających
  • Proces oceniania z wykorzystaniem osób oceniających i procedury w przypadku, gdy dwóch oceniających nie zgadza się co do oceny
  • Jak ustalany jest wynik końcowy
  • Następujące pomiary statystyczne:
    1. Dokładna umowa
    2. Dokładne + sąsiadujące porozumienie
    3. Kwadratowy ważony kapp (QWK)
    4. Standaryzowana średnia różnica (SMD)
    5. Korelacja rang Spearmana (p)
    6. 2 STAMP Levels Apart (miara braku porozumienia)

Środki te można triangulować, aby zapewnić najwyższy możliwy stopień dokładności i wiarygodności wyników Avant STAMP .

Wyniki pokazują, że na wszystkich poziomach ocena odpowiedzi Avant STAMP 4S i STAMP WS Writing and Speaking jest bardzo spójna. Amerykańska Rada ds. Edukacji (ACE) przeprowadziła obszerny przegląd procesów oceny, dokładności i niezawodności Avant. Na podstawie tego przeglądu ACE rekomenduje Avant STAMP do zaliczenia na studiach. Aby uzyskać więcej informacji statystycznych na temat dokładności i wiarygodności oceny odpowiedzi Avant w zakresie mówienia i pisania, przeczytaj pełną białą księgę na temat dokładności i wiarygodności oceny odpowiedzi Avant w zakresie mówienia i pisania STAMP .

Weryfikacja dokładności i wiarygodności oceny w teście biegłości językowej ma kluczowe znaczenie przy ocenie, czy test jest odpowiedni dla danego programu. Ponieważ stawka za testowanie i dokumentowanie umiejętności językowych rośnie, pytanie brzmi: czy możesz sobie na to nie pozwolić?

Artykuły, które mogą Ci się również spodobać:

Odkryj potencjał swoich programów językowych dzięki Avant STAMP DataDane są kluczem do biegłości językowejWiarygodność i ważność testów