noesisnoesis
综合强证据支持

项目反应理论

Lord, F. M. · 1980

也被称为: IRT · Rasch · Rasch Measurement Theory · Latent Trait Theory

项目反应理论是一系列数学模型,描述潜在特质(能力、态度)与测验题目作答之间的关系,实现了不依赖样本的题目校准和不依赖具体测验的人员测量。与经典测验理论不同,项目反应理论在同一量尺上对题目层面的特征(难度、区分度、猜测系数)和受测者能力进行建模,并在每个能力水平上提供测量精度估计。项目反应理论支撑着现代计算机化自适应测验、大规模教育测评(PISA、GRE、GMAT)以及临床患者报告结局测量。

一种方法学(而非特质内容)框架,将作答的概率建模为潜在特质水平和条目参数(难度、区分度、猜测系数)的函数。它支撑自适应/计算机化自适应测验(CAT)的实施,而非任何单一测量工具的内容。

来源:
Lord, F. M. (1980). Applications of Item Response Theory to Practical Testing Problems.

证据概览

实证支持
强证据支持
重复验证
已充分重复验证
跨文化性
具普遍性
综合分析(统合分析)
已收录 10 项
研究领域心理测量学教育测量临床评估测验开发电脑化适性测验

这些评等总结了关于该理论已发表的文献,而非以此理论建构的任何单一测验的品质。它们是根据下方所列来源所作的编辑判断,并会随著证据累积而变化。

历史背景

项目反应理论的基础由丹麦的乔治·拉施(Georg Rasch,1960年)以及美国的弗雷德里克·洛德(Frederic Lord)和艾伦·伯恩鲍姆(Allan Birnbaum,20世纪60年代)各自独立奠定,洛德和诺维克(Novick)1968年出版的《心理测验分数的统计理论》提供了数学基础。洛德1980年出版的《项目反应理论在实际测评问题中的应用》通过展示其在测验编制、等值和偏差检测方面的实际应用,巩固了这一领域。随着20世纪80至90年代计算能力的提升,该理论得到广泛采用,使大规模测评项目的参数估计变得可行。

构念

尚无构念文档记录。

工具

尚无基于此理论的工具。

基于此理论的测试

尚无基于此理论的测试。

实际应用

项目反应理论是计算机化自适应测验(CAT)的基础,应用于GRE、GMAT、NCLEX护理执照考试以及CAT-ASVAB军事测评等高风险测评中,通过为每位受测者选择与其能力水平相匹配的题目,实现更短但更精确的测试。在临床环境中,项目反应理论支撑着PROMIS(患者报告结局测量信息系统)倡议,实现了对健康结局的高效测量。项目反应理论的方法还支持跨版本的测验等值、用于公平性分析的差异题目功能(DIF)检测,以及全球标准化测评项目的题库开发。

如何测量

项目反应理论本身是一种测量方法学,而非实质性的心理学理论。常见的模型包括适用于二分条目的单参数(1PL/Rasch)、双参数(2PL)和三参数(3PL)逻辑斯蒂模型,以及适用于多分条目的分级反应模型和部分给分模型。参数估计采用最大似然法或贝叶斯方法。

批评与局限

一个关键的批评是项目反应理论模型所要求的强参数假设(如单维性和局部独立性),这些假设可能不适用于复杂的心理构念,从而导致模型拟合不佳。Rasch模型学派与更广泛的项目反应理论学派在根本问题上存在分歧,即模型应当拟合数据(项目反应理论方法),还是数据应当满足基本测量的模型要求(Rasch方法)。项目反应理论需要相对较大的样本量才能获得稳定的参数估计(根据模型不同,通常需要200至1000名以上受测者),这限制了其在小规模测评中的适用性。

重要文献

  • Lord, F. M.. (1980). Applications of Item Response Theory to Practical Testing Problems.
  • Lord, F. M. & Novick, M. R.. (1968). Statistical Theories of Mental Test Scores.
  • Rasch, G.. (1960). Probabilistic Models for Some Intelligence and Attainment Tests.
  • Hambleton, R. K., Swaminathan, H. & Rogers, H. J.. (1991). Fundamentals of Item Response Theory.
  • Embretson, S. E. & Reise, S. P.. (2000). Item Response Theory for Psychologists. 10.4324/9781410605269

相关理论

Classical Test TheoryRasch Measurement TheoryGeneralizability TheoryLatent Trait TheoryFactor Analysis
项目反应理论:定义、证据与测量方式 | NOESIS