索引 / 001 ZH-TW
Psychometrics: An Introduction(心理計量學導論) cover

教育學

教育學

Psychometrics: An Introduction(心理計量學導論)

R. Michael Furr

英文原名: Psychometrics: An Introduction

一本說明測驗與評量背後測量理論的概念性導論。作者解說分數如何建構、信度與效度如何估計,以及試題反應理論等現代方法如何延伸古典測驗理論,搭配實例,著重理解而非艱深的數學推導。

需要的基礎: 已修習教室評量相關課程,以及涵蓋相關與變異數的基礎統計學。

難度等級
中級
學術層次
研究所
psychometricsreliabilityvaliditytest theory教科書

01 / 導讀

導讀

引用

Furr, R. M. (2021). Psychometrics: An Introduction (4th ed.). SAGE Publications.

章節概要

第四版共十四章。開篇一章之後分為五個部分:測量的基本概念(第2–4章)、信度(第5–7章)、效度(第8–9章)、心理測量質量的威脅(第10–11章)以及進階的心理測量方法(第12–14章)。出版社將本書的取向描述為概念性的:關注目的而非步驟,關注「為什麼」而非「怎麼做」,重概念、邏輯和實際應用,而不重數學證明。多數章節末尾附有R語法的技術附錄、小結和推薦閱讀。

第1章:心理測量與心理測量的重要性

導論章說明心理測驗為何重要,可觀察的行為與不可觀察的心理屬性之間是什麼關係,什麼是心理測驗及其型別,以及什麼是心理測量學。它還討論心理學中測量所面臨的挑戰和個體差異的重要性,並指出心理測量學遠遠超出差異心理學的範圍。

第一部分,第2章:量尺化

本章從關於數字的基本問題談起:測量單位、可加性與計數,以及四種測量量尺;隨後討論這些量尺的實際含義和若干補充問題。

第一部分,第3章:差異、一致性與測驗分數的意義

本章討論分數的變異與分佈、量化分佈之間關聯或一致性的方法、複合變數的方差與協方差,以及二分專案;最後講解測驗分數的解釋和測驗常模。

第一部分,第4章:測驗的維度與因素分析

本章探討一個測驗測量了幾個維度,並介紹因素分析作為考察測驗維度的工具。

第二部分,第5–7章:信度:概念基礎;信度的經驗估計;信度的重要性

第5章闡述經典測驗理論:觀察分數、真分數與測量誤差及其各自的方差,理解信度的四種方式,測量標準誤,以及領域抽樣理論。第6章講用複本法、重測法和內部一致性法進行經驗估計,並涉及樣本異質性、信度概化和差異分數的信度。第7章說明信度在應用實踐、行為研究以及測驗編制與改進中為何重要。

第三部分,第8–9章:效度:概念基礎;收斂效度與區分效度證據的估計與評價

第8章界定效度,並按來源整理效度證據:測驗內容、內部結構、反應過程、與其他變數的關係,以及測驗的後果;還討論關於效度的其他觀點,並對比信度與效度。第9章聚焦於法則網路、評價收斂與區分證據的方法、影響效度係數的因素以及如何解釋效度係數。

第四部分,第10–11章:反應偏差;測驗偏差

第10章講反應偏差的型別及其應對辦法,包括反應心向與反應風格。第11章考察分數偏差為何值得關注,如何檢測構念偏差和預測偏差,其他統計程式以及測驗公平性,並以SAT為例展開。

第五部分,第12–14章:驗證性因素分析;概化理論;專案反應理論與拉施模型

第12章回到因素分析的驗證形式,將其用於量表的內部結構、信度、效度和測量不變性。第13章介紹概化理論,包括G研究與D研究,以及單側面和雙側面設計。第14章介紹專案反應理論和拉施模型,包括單引數示例、模型擬合、專案與測驗資訊量以及應用。

核心概念

第一部分:測量的基本概念

  • 測量量尺:四種量尺,以及各自對分數處理方式的含義。
  • 測驗常模:用於解釋個體分數的參照分佈。
  • 測驗維度:測驗測量的是一種還是多種屬性,用因素分析來檢驗。

第二部分:信度

  • 觀察分數、真分數與誤差分數:定義信度所依據的經典分解。
  • 測量標準誤:觀察分數可能偏離真分數的幅度。
  • 信度估計:複本法、重測法和內部一致性方法。

第三部分:效度

  • 效度證據的來源:內容、內部結構、反應過程、與其他變數的關係、測驗後果。
  • 法則網路:用來判斷收斂與區分證據的預期關係網路。

第四至五部分:威脅與進階方法

  • 反應偏差與測驗偏差:對分數質量和公平性的威脅。
  • 驗證性因素分析、概化理論、專案反應理論:本書介紹的三種進階框架。

評析

優點

  • 概念取向表述清楚。 出版社的介紹明確了本書的目標:重目的輕步驟、重理解輕證明;小節標題也印證了這一點,它們圍繞「什麼是效度?」「為什麼要擔心測驗分數偏差?」等問題組織。
  • 統計知識在需要處引入。 出版社指出,統計程式是在使用情境中引入的,而不是另設一章,因此讀者在分數和信度的討論需要時才遇到方差和協方差。
  • 第四版提供R支援。 多數章末的R技術附錄以及資料集和語法檔案,讓讀者可以練習計算。出版社還列出了增加的圖表,以及對基礎統計知識的補充。
  • 順序清晰。 信度與效度都是先有概念章,再有經驗章,進階內容放在最後。

侷限

  • 進階方法各只有一章。 驗證性因素分析、概化理論和專案反應理論各佔一章,僅是入門;需要潛變數建模或IRT實操訓練的讀者,要另找專門教材。
  • 有意以概念為主。 本書有意重概念而不重數學證明,想看證明或推導的讀者在這裡找不到。
  • 聚焦心理測量。 例子取自行為科學研究,教育工作者需要自行把這些想法轉用於課堂評估和大規模教育測驗。

在課程中的定位

在評估課程中,弗爾的這本書是測量理論之作。波帕姆的《Classroom Assessment》和布魯克哈特、尼特科的《Educational Assessment of Students》是面向教師的教材,先講效度與信度,再講如何編制和使用課堂評估,實踐應從它們入手。威廉的《Embedded Formative Assessment》是對形成性評估的實用闡述,《Handbook of Formative Assessment in the Disciplines》則是把形成性評估與具體學科中的測量原理聯絡起來的研究手冊。

當問題從「如何評估」轉為「這個分數有多可靠、多有效」時,就該讀弗爾的書:信度和效度在數量上意味著什麼,偏差如何檢測,專案反應理論等現代方法如何拓展經典測驗理論。它也很適合與上述把形成性評估和測量原理聯絡起來的手冊搭配。

如何使用本書

本書適合教育學和心理學的研究生,以及編制、選用或解釋測驗的實務工作者。比較合適的準備是修過課堂評估課程和涵蓋相關與方差的統計學入門課。

實用的閱讀安排:

  • 核心: 第1–3章和第5–6章,掌握分數、方差與信度的詞彙,再讀第8–9章瞭解效度。
  • 應用: 第7章講信度在實踐中的重要性;選用或審查測驗的人再讀第11章的測驗偏差。
  • 選讀: 第4章和第12章合起來讀,瞭解因素分析;經典內容紮實之後,再讀第13–14章的概化理論和專案反應理論。

閱讀時可以用隨書資料集執行R附錄,並把每個概念用到自己熟悉的一份測驗上,問問這份測驗有哪些信度證據和效度證據。