Teoria odpowiedzi na pozycję testową
Lord, F. M. · 1980
Znana również jako: IRT · Rasch · Rasch Measurement Theory · Latent Trait Theory
Teoria odpowiedzi na pozycję testową to rodzina modeli matematycznych opisujących zależność między cechami latentnymi (zdolnościami, postawami) a odpowiedziami na pozycje testowe, umożliwiająca kalibrację pozycji niezależną od próby i pomiar osoby niezależny od testu. W przeciwieństwie do klasycznej teorii testów, teoria odpowiedzi na pozycję testową modeluje charakterystyki pozycji na poziomie pojedynczej pozycji (trudność, dyskryminacja, zgadywanie) oraz zdolność osoby na wspólnej skali, dostarczając oszacowania precyzji pomiaru na każdym poziomie zdolności. Teoria odpowiedzi na pozycję testową stanowi podstawę współczesnego komputerowego testowania adaptacyjnego, wielkoskalowych ocen edukacyjnych (PISA, GRE, GMAT) oraz klinicznych miar wyników zgłaszanych przez pacjentów.
Ramy metodologiczne (a nie dotyczące treści cechy), modelujące prawdopodobieństwo odpowiedzi jako funkcję poziomu cechy latentnej i parametrów pozycji (trudność, dyskryminacja, zgadywanie). Stanowią podstawę administrowania adaptacyjnego/CAT, a nie treści żadnego konkretnego instrumentu.
- Źródło:
- Lord, F. M. (1980). Applications of Item Response Theory to Practical Testing Problems.
Dowody w skrócie
- Wsparcie empiryczne
- Silne dowody
- Replikacja
- Dobrze zreplikowane
- Międzykulturowość
- Uniwersalne
- Metaanalizy
- 10 zindeksowanych
Te oceny podsumowują opublikowaną literaturę na temat danej teorii, a nie jakość jakiegokolwiek pojedynczego testu na niej opartego. Są to oceny redakcyjne oparte na źródłach wymienionych poniżej i zmieniają się wraz z gromadzeniem nowych dowodów.
Kontekst historyczny
Podstawy teorii odpowiedzi na pozycję testową zostały niezależnie stworzone przez Georga Rascha w Danii (1960) oraz Frederica Lorda i Allana Birnbauma w Stanach Zjednoczonych (lata 60. XX wieku), a praca Lorda i Novicka z 1968 roku "Statistical Theories of Mental Test Scores" zapewniła podstawy matematyczne. Praca Lorda z 1980 roku "Applications of Item Response Theory to Practical Testing Problems" skonsolidowała tę dziedzinę, wykazując praktyczne zastosowania w konstruowaniu testów, ekwiwalencji i wykrywaniu obciążenia. Teoria zdobyła szeroką akceptację w latach 80. i 90. XX wieku wraz ze wzrostem możliwości obliczeniowych, co uczyniło szacowanie parametrów wykonalnym dla wielkoskalowych programów testowych.
Konstrukty
Nie udokumentowano jeszcze żadnych konstruktów.
Narzędzia
Nie ma jeszcze żadnych instrumentów opartych na tej teorii.
Testy oparte na tej teorii
Nie ma jeszcze żadnych testów opartych na tej teorii.
Zastosowania praktyczne
Teoria odpowiedzi na pozycję testową stanowi podstawę komputerowego testowania adaptacyjnego (CAT), stosowanego w testach o wysokiej stawce, takich jak GRE, GMAT, egzamin licencyjny dla pielęgniarek NCLEX oraz wojskowa bateria CAT-ASVAB, umożliwiając krótsze, ale bardziej precyzyjne testy poprzez dobór pozycji dostosowanych do poziomu zdolności każdego badanego. W warunkach klinicznych teoria odpowiedzi na pozycję testową zasila inicjatywę PROMIS (Patient-Reported Outcomes Measurement Information System), umożliwiając efektywny pomiar wyników zdrowotnych. Metody teorii odpowiedzi na pozycję testową wspierają również ekwiwalencję testów między formami, wykrywanie zróżnicowanego funkcjonowania pozycji (DIF) dla analiz sprawiedliwości oraz rozwój banków pozycji dla programów testów standaryzowanych na całym świecie.
Jak to jest mierzone
Teoria odpowiedzi na pozycję testową jest sama metodologią pomiarową, a nie merytoryczną teorią psychologiczną. Do popularnych modeli należą: model logistyczny jednoparametrowy (1PL/Rasch), dwuparametrowy (2PL) i trzyparametrowy (3PL) dla pozycji dychotomicznych, a także model odpowiedzi stopniowanej (Graded Response Model) i model częściowego kredytu (Partial Credit Model) dla pozycji politomicznych. Szacowanie parametrów wykorzystuje metody maksymalnej wiarogodności lub metody bayesowskie.
Krytyka i ograniczenia
Kluczowa krytyka dotyczy silnych założeń parametrycznych wymaganych przez modele teorii odpowiedzi na pozycję testową (takich jak jednowymiarowość i lokalna niezależność), które mogą nie być spełnione dla złożonych konstruktów psychologicznych, co prowadzi do niedopasowania modelu. Środowisko modelu Rascha i szersze środowisko teorii odpowiedzi na pozycję testową fundamentalnie różnią się w kwestii tego, czy model powinien być dopasowany do danych (podejście teorii odpowiedzi na pozycję testową), czy dane powinny spełniać wymagania modelu dla fundamentalnego pomiaru (podejście Rascha). Teoria odpowiedzi na pozycję testową wymaga stosunkowo dużych rozmiarów próby dla stabilnego szacowania parametrów (typowo 200-1000+ badanych, w zależności od modelu), co ogranicza jej zastosowanie w badaniach na małą skalę.
Kluczowe publikacje
- Lord, F. M.. (1980). Applications of Item Response Theory to Practical Testing Problems.
- Lord, F. M. & Novick, M. R.. (1968). Statistical Theories of Mental Test Scores.
- Rasch, G.. (1960). Probabilistic Models for Some Intelligence and Attainment Tests.
- Hambleton, R. K., Swaminathan, H. & Rogers, H. J.. (1991). Fundamentals of Item Response Theory.
- Embretson, S. E. & Reise, S. P.. (2000). Item Response Theory for Psychologists. 10.4324/9781410605269