索引 / 001 ZH-CN
Psychometrics: An Introduction(心理测量学导论) cover

教育学

教育学

Psychometrics: An Introduction(心理测量学导论)

R. Michael Furr

英文原名: Psychometrics: An Introduction

一本介绍测验与评价背后测量理论的概念性导论。弗尔讲解分数如何构成、信度和效度如何估计,以及项目反应理论等现代方法如何扩展经典测验理论,配有实例,强调理解而非繁重的数学推导。

需要的基础: 已修过课堂评价课程以及涵盖相关和方差的入门统计课程。

难度等级
中级
学术层次
研究生
psychometricsreliabilityvaliditytest theory教科书

01 / 导读

导读

引用

Furr, R. M. (2021). Psychometrics: An Introduction (4th ed.). SAGE Publications.

章节概要

第四版共十四章。开篇一章之后分为五个部分:测量的基本概念(第2–4章)、信度(第5–7章)、效度(第8–9章)、心理测量质量的威胁(第10–11章)以及进阶的心理测量方法(第12–14章)。出版社将本书的取向描述为概念性的:关注目的而非步骤,关注“为什么”而非“怎么做”,重概念、逻辑和实际应用,而不重数学证明。多数章节末尾附有R语法的技术附录、小结和推荐阅读。

第1章:心理测量与心理测量的重要性

导论章说明心理测验为何重要,可观察的行为与不可观察的心理属性之间是什么关系,什么是心理测验及其类型,以及什么是心理测量学。它还讨论心理学中测量所面临的挑战和个体差异的重要性,并指出心理测量学远远超出差异心理学的范围。

第一部分,第2章:量尺化

本章从关于数字的基本问题谈起:测量单位、可加性与计数,以及四种测量量尺;随后讨论这些量尺的实际含义和若干补充问题。

第一部分,第3章:差异、一致性与测验分数的意义

本章讨论分数的变异与分布、量化分布之间关联或一致性的方法、复合变量的方差与协方差,以及二分项目;最后讲解测验分数的解释和测验常模。

第一部分,第4章:测验的维度与因素分析

本章探讨一个测验测量了几个维度,并介绍因素分析作为考察测验维度的工具。

第二部分,第5–7章:信度:概念基础;信度的经验估计;信度的重要性

第5章阐述经典测验理论:观察分数、真分数与测量误差及其各自的方差,理解信度的四种方式,测量标准误,以及领域抽样理论。第6章讲用复本法、重测法和内部一致性法进行经验估计,并涉及样本异质性、信度概化和差异分数的信度。第7章说明信度在应用实践、行为研究以及测验编制与改进中为何重要。

第三部分,第8–9章:效度:概念基础;收敛效度与区分效度证据的估计与评价

第8章界定效度,并按来源整理效度证据:测验内容、内部结构、反应过程、与其他变量的关系,以及测验的后果;还讨论关于效度的其他观点,并对比信度与效度。第9章聚焦于法则网络、评价收敛与区分证据的方法、影响效度系数的因素以及如何解释效度系数。

第四部分,第10–11章:反应偏差;测验偏差

第10章讲反应偏差的类型及其应对办法,包括反应心向与反应风格。第11章考察分数偏差为何值得关注,如何检测构念偏差和预测偏差,其他统计程序以及测验公平性,并以SAT为例展开。

第五部分,第12–14章:验证性因素分析;概化理论;项目反应理论与拉施模型

第12章回到因素分析的验证形式,将其用于量表的内部结构、信度、效度和测量不变性。第13章介绍概化理论,包括G研究与D研究,以及单侧面和双侧面设计。第14章介绍项目反应理论和拉施模型,包括单参数示例、模型拟合、项目与测验信息量以及应用。

核心概念

第一部分:测量的基本概念

  • 测量量尺:四种量尺,以及各自对分数处理方式的含义。
  • 测验常模:用于解释个体分数的参照分布。
  • 测验维度:测验测量的是一种还是多种属性,用因素分析来检验。

第二部分:信度

  • 观察分数、真分数与误差分数:定义信度所依据的经典分解。
  • 测量标准误:观察分数可能偏离真分数的幅度。
  • 信度估计:复本法、重测法和内部一致性方法。

第三部分:效度

  • 效度证据的来源:内容、内部结构、反应过程、与其他变量的关系、测验后果。
  • 法则网络:用来判断收敛与区分证据的预期关系网络。

第四至五部分:威胁与进阶方法

  • 反应偏差与测验偏差:对分数质量和公平性的威胁。
  • 验证性因素分析、概化理论、项目反应理论:本书介绍的三种进阶框架。

评析

优点

  • 概念取向表述清楚。 出版社的介绍明确了本书的目标:重目的轻步骤、重理解轻证明;小节标题也印证了这一点,它们围绕“什么是效度?”“为什么要担心测验分数偏差?”等问题组织。
  • 统计知识在需要处引入。 出版社指出,统计程序是在使用情境中引入的,而不是另设一章,因此读者在分数和信度的讨论需要时才遇到方差和协方差。
  • 第四版提供R支持。 多数章末的R技术附录以及数据集和语法文件,让读者可以练习计算。出版社还列出了增加的图表,以及对基础统计知识的补充。
  • 顺序清晰。 信度与效度都是先有概念章,再有经验章,进阶内容放在最后。

局限

  • 进阶方法各只有一章。 验证性因素分析、概化理论和项目反应理论各占一章,仅是入门;需要潜变量建模或IRT实操训练的读者,要另找专门教材。
  • 有意以概念为主。 本书有意重概念而不重数学证明,想看证明或推导的读者在这里找不到。
  • 聚焦心理测量。 例子取自行为科学研究,教育工作者需要自行把这些想法转用于课堂评估和大规模教育测验。

在课程中的定位

在评估课程中,弗尔的这本书是测量理论之作。波帕姆的《Classroom Assessment》和布鲁克哈特、尼特科的《Educational Assessment of Students》是面向教师的教材,先讲效度与信度,再讲如何编制和使用课堂评估,实践应从它们入手。威廉的《Embedded Formative Assessment》是对形成性评估的实用阐述,《Handbook of Formative Assessment in the Disciplines》则是把形成性评估与具体学科中的测量原理联系起来的研究手册。

当问题从“如何评估”转为“这个分数有多可靠、多有效”时,就该读弗尔的书:信度和效度在数量上意味着什么,偏差如何检测,项目反应理论等现代方法如何拓展经典测验理论。它也很适合与上述把形成性评估和测量原理联系起来的手册搭配。

如何使用本书

本书适合教育学和心理学的研究生,以及编制、选用或解释测验的实务工作者。比较合适的准备是修过课堂评估课程和涵盖相关与方差的统计学入门课。

实用的阅读安排:

  • 核心: 第1–3章和第5–6章,掌握分数、方差与信度的词汇,再读第8–9章了解效度。
  • 应用: 第7章讲信度在实践中的重要性;选用或审查测验的人再读第11章的测验偏差。
  • 选读: 第4章和第12章合起来读,了解因素分析;经典内容扎实之后,再读第13–14章的概化理论和项目反应理论。

阅读时可以用随书数据集运行R附录,并把每个概念用到自己熟悉的一份测验上,问问这份测验有哪些信度证据和效度证据。