noesisnoesis
混合強力證據

項目反應理論

Lord, F. M. · 1980

別稱: IRT · Rasch · Rasch Measurement Theory · Latent Trait Theory

項目反應理論是一系列數學模型,用於描述潛在特質(能力、態度)與測驗題目反應之間的關係,能實現不受樣本限制的題目校準,以及不受測驗限制的個人測量。與古典測驗理論不同,項目反應理論在共同尺度上同時建模題目層次的特徵(難度、鑑別度、猜測度)與個人能力,並提供每個能力水準的測量精確度估計。項目反應理論支撐著現代電腦化適性測驗、大規模教育評量(PISA、GRE、GMAT),以及臨床患者報告結果測量。

這是一種方法論架構(並非特質內容架構),將反應機率建模為潛在特質水準與題目參數(難度、鑑別度、猜測度)的函數。它是適性化/電腦化適性測驗(CAT)施測方式的基礎,而非任何單一測驗內容的依據。

來源:
Lord, F. M. (1980). Applications of Item Response Theory to Practical Testing Problems.

證據概覽

實證支持
強力證據
重複驗證
已充分重複驗證
跨文化性
具普遍性
綜合分析(統合分析)
已收錄 10 項
研究領域心理測量學教育測量臨床評估測驗開發電腦化適性測驗

這些評等總結了關於該理論已發表的文獻,而非以此理論建構的任何單一測驗的品質。它們是根據下方所列來源所作的編輯判斷,並會隨著證據累積而變化。

歷史背景

項目反應理論的基礎由丹麥的Georg Rasch(1960年)與美國的Frederic Lord及Allan Birnbaum(1960年代)分別獨立建立,Lord與Novick於1968年所著的《心理測驗分數的統計理論》(Statistical Theories of Mental Test Scores)奠定了其數學基礎。Lord於1980年出版的《項目反應理論在實際測驗問題中的應用》(Applications of Item Response Theory to Practical Testing Problems),透過展示其在測驗建構、等化與偏誤偵測方面的實際應用,整合了此領域。隨著1980至1990年代運算能力提升,該理論獲得廣泛採用,使大規模測驗計畫中的參數估計變得可行。

構念

目前尚無相關構念記錄。

工具

目前尚無基於此理論建立的測驗工具。

以此理論為基礎的測驗

目前尚無基於此理論建立的測驗。

實務應用

項目反應理論是電腦化適性測驗(CAT)的基礎,應用於GRE、GMAT、NCLEX護理執照測驗,以及CAT-ASVAB軍事測驗等高風險評估中,透過依受測者能力水準挑選合適題目,使測驗更短卻更精確。在臨床情境中,項目反應理論支撐了PROMIS(患者報告結果測量資訊系統)計畫,使健康結果的測量更有效率。項目反應理論方法也支援跨版本測驗等化、差異項目功能(DIF)偵測(用於公平性分析),以及全球標準化測驗計畫的題庫開發。

測量方式

項目反應理論本身是一種測量方法論,而非實質性的心理學理論。常見模型包括用於二元題目的單參數(1PL/Rasch)、雙參數(2PL)與三參數(3PL)邏輯斯模型,以及用於多元計分題目的分級反應模型與部分計分模型。參數估計採用最大似然法或貝氏方法。

批評與限制

一項主要的批評是,項目反應理論模型要求嚴格的參數假設(例如單一維度性與局部獨立性),這些假設對於複雜的心理構念可能不成立,導致模型配適不良。Rasch模型社群與更廣泛的項目反應理論社群,對於模型應配合資料(項目反應理論取向),還是資料應符合基本測量的模型要求(Rasch取向),存在根本性的分歧。項目反應理論需要相對較大的樣本量才能穩定估計參數(依模型不同,通常需要200至1000名以上受測者),這限制了其在小規模評估中的適用性。

重要文獻

  • Lord, F. M.. (1980). Applications of Item Response Theory to Practical Testing Problems.
  • Lord, F. M. & Novick, M. R.. (1968). Statistical Theories of Mental Test Scores.
  • Rasch, G.. (1960). Probabilistic Models for Some Intelligence and Attainment Tests.
  • Hambleton, R. K., Swaminathan, H. & Rogers, H. J.. (1991). Fundamentals of Item Response Theory.
  • Embretson, S. E. & Reise, S. P.. (2000). Item Response Theory for Psychologists. 10.4324/9781410605269

相關理論

Classical Test TheoryRasch Measurement TheoryGeneralizability TheoryLatent Trait TheoryFactor Analysis
項目反應理論:定義、證據與測量方式 | NOESIS