Jakie są różnice między projektowaniem testów o stałej formie a testami adaptacyjnymi?
Istnieją dwa podstawowe modele testów do oceny biegłości językowej: Testy o stałej formie i testy adaptacyjne. W teście o ustalonej formie każdy zdający otrzymuje te same elementy (czyli pytania), które są dostarczane na papierze lub na komputerze. Test adaptacyjny może być przeprowadzony wyłącznie na komputerze. Algorytm komputerowy ocenia każdy element, gdy zdający na niego odpowiada, a następnie na podstawie wyniku tego elementu lub grupy elementów, algorytm komputerowy dostosowuje poziom następnego elementu lub grupy elementów do następnego poziomu "wyzwania". Aż do ery komputerów nie było możliwe przeprowadzanie adaptacyjnych testów biegłości językowej na dużą skalę. Nadal nie jest możliwe zastosowanie skomputeryzowanego projektowania testów adaptacyjnych do testów mówienia i pisania na dużą skalę, chociaż sztuczne uczenie się może to wkrótce zmienić. Obecnie jednak dość łatwe i powszechne jest stosowanie testów adaptacyjnych do testów czytania i słuchania.
Jakie są zalety adaptacyjnych testów biegłości językowej?
Adaptacyjne testy biegłości językowej mają wiele zalet. Ponieważ poziom trudności zadań dostosowuje się do poziomu zademonstrowanego przez zdającego, jest on konsekwentnie poddawany wyzwaniom, nie będąc przytłoczonym zbyt trudnymi zadaniami lub znudzonym łatwymi. W teście adaptacyjnym zdający może wznieść się na szczyt skali w oparciu o swoje wyniki. W teście adaptacyjnym zdający przechodzą przez test różnymi ścieżkami, dzięki czemu oszukiwanie jest znacznie trudniejsze (tak, zdarza się to wszędzie). Ponieważ algorytm adaptacyjny szybko dostosowuje się do rzeczywistego poziomu zdającego, jest w stanie dostarczyć więcej elementów w szerokim zakresie poziomów, które są na poziomie lub zbliżone do umiejętności zdającego, zwiększając pewność, że ostateczny wynik jest dokładny - a wszystko to w krótszym czasie niż w przypadku testu o stałej formie. W Avant STAMP używamy również adaptacyjnego wyniku czytania, aby określić poziom podpowiedzi, które dostarczamy dla podpowiedzi pisania, oraz adaptacyjnego wyniku słuchania w ten sam sposób dla podpowiedzi mówienia, dzięki czemu sekcje produktywne są częściowo adaptacyjne i bardziej odpowiednio wyrównane dla każdego zdającego.
Czym jest wielostopniowy test adaptowany komputerowo (CAMST)?
Jedną ze strategii projektowania testów, którą firma Avant przyjęła na wczesnym etapie, jest wielostopniowy test adaptacyjny (CAMST), którego pionierem był dr Rick Leucht, profesor metodologii badań edukacyjnych na Uniwersytecie Karoliny Północnej w Greensboro. CAMST łączy w sobie zalety testów adaptacyjnych i testów o ustalonej formie, zasadniczo ustawiając w szeregu mini testy o ustalonej formie. Po każdym teście zdający przesuwają się w górę, w dół lub pozostają na tym samym poziomie w zależności od swoich wyników. W teście adaptacyjnym polegającym wyłącznie na sprawdzaniu poszczególnych elementów, uczestnik testu spadnie na niższy poziom, jeśli popełni błąd w jednym elemencie. W każdym testlecie grupujemy mieszankę tematów i trudności elementów, aby algorytm adaptacyjny był bardziej dokładny i wydajny przez cały czas trwania testu. Więcej informacji na temat algorytmu CAMST firmy Avant STAMPmożna znaleźć pod tym linkiem: Computer Adaptive Multi-Stage Test Design.
Testy językowe i technologia o stałej formie
Testy o ustalonej formie opierają się na starszej lub mniej zaawansowanej technologii i mają wiele wad, z których niektóre już wymieniłem. Aby ocenić szeroki zakres poziomów językowych, konieczne jest posiadanie elementów, które obejmują cały zakres poziomów, ale oznacza to, że test staje się bardzo długi, a uczniowie na niższym poziomie będą musieli zmierzyć się z elementami, które ich przytłoczą, a uczniowie na wyższym poziomie często są znudzeni lub nie mają wyzwań związanych z treścią. W ramach kompromisu, aby zapobiec tym problemom, nauczyciele są czasami proszeni o wybranie poziomu, na którym uczniowie będą rozwiązywać test, co nakłada limit na ich wyniki.
Testy o ustalonej formie mają jednak swoje zalety. Ponieważ wszyscy uczestnicy testu otrzymują te same elementy, można kontrolować zestaw tematów. Z pewnych względów technicznych łatwiej jest również przeprowadzić analizę psychometryczną (statystyczną) elementów w testach o stałej formie niż w testach adaptacyjnych. Oto artykuł w Wikipedii na temat komputerowych testów adaptacyjnych, który porusza tę kwestię, jeśli naprawdę jesteś testowym nerdem, jak niektórzy z nas. Kliknij ten link, aby dowiedzieć się więcej o komputerowych testach adaptacyjnych.
Avant wykorzystuje adaptacyjny test CAMST we wszystkich swoich testach biegłości językowej. Głęboko wierzymy w jego moc dostarczania dokładnych wyników i tworzenia przyjemnych doświadczeń testowych dla osób uczących się języków obcych.