信度的估计方法
X1 20 19 18 18 17 16 14 12 12 10 X2 20 20 19 16 16 17 12 11 13 9
重测信度 复本信度 内部一致性信度 评分者信度
在重测信度和复本信度原理的基础上,
把这两种方法加以综合应用就可以产 生另外一种信度估计方法,得到再测复本信度,或者称为稳定-等值信度 (stability and equivalent reliability)如果 两个复本测验是相距较长一段时间分
W 1 2K2N2N K n3n/12
重测信度
各种信度系数相应误差变异的来源:
复本信度
内部一致性信度
信度
误差变异来源
评分者信度
重测信度
时间取样
复本信度(连续施测) 内容取样
复本信度(间隔施测) 时间与内容取样
分半信度
内容取样
同质性信度 评分者信度
内容取样和内容的异 质性
评分者间的差异
重测信度 复本信度 内部一致性信度 评分者信度
3. 利用公式校正
把测验分成两半的方法除了奇偶法之外,还有随机安置法、内容 匹配法、难度奇偶排序法等等;每一种划分方法产生的分半信度 估计值都有差别。即分半信度估计不具备惟一性。
重测信度 复本信度 内部一致性信度 评分者信度
库德(Kuder)-理查逊(Richardson)方法。
K-R20公式(仅适用于以1、0记分)
Ri2
2
Ri N
K2 N3 N
如有A、B、C三位专家给6位应聘者的面试评分,结 果如下,试求评分者信度。
A BC 1 75 66 45 2 90 72 60 3 81 63 54 4 60 60 42 5 84 75 63 6 96 90 66
A B C Ri 1 5 4 5 14 2 2 23 7 3 4 5 4 13 4 6 6 6 18 5 3 32 8 6 1 11 3
2. 测量中不能有练习效应和遗忘效应, 或者练习和遗忘效应基本可以互相抵 消;
重测信度 复本信度 内部一致性信度 评分者信度
重测信度的使用条件:
3. 不能存在差别学习的效果,即两次 施测期间被试的学习效果没有差别;
重测信度 复本信度 内部一致性信度 评分者信度
重测信度的计算公式:
皮尔逊积差相关系数
重测信度 复本信度 内部一致性信度 评分者信度
分半信度(split-half reliability)是指将一 个测验分成对等的两半后,所有被试 在这两半上所得分数的一致性程度。
常见的分半方法是按测题序号奇偶分 半:测验题目按某种顺序(如难度) 排列;
如果是随机排列的题目,则必须是所 有题目是平等的(要么难度相等,要么 性质一致,是测同一个心理特质的);
当被试在测验中表现出跨项目的一致 性时,就称测验具有项目同质性。即 各个测题得分为正相关时,即为同质, 相关为零时则为异质;
重测信度 复本信度 内部一致性信度 评分者信度
注意:
1. 适用于同质性测验,而不适用于异 质性测验;
2. 不适用速度测验;
3. 估计内在一致性系数的方法通常有 两类:一类是分半法,另外一类方法 需要对项目反应的方差或协方差进行 分析。
注意:
(1) 排除施测顺序的影响;
(2) 在报告结果时,应报告两次施测的间 隔、及在此间隔内被试的有关经历;
重测信度 复本信度 内部一致性信度 评分者信度
复本信度的计算公式:
皮尔逊积差相关系数
rtt
X1X2
X12
(
X1)2 n
X1 X2 n
X22
(
X2)2 n
复本信度的计算
10名学生创造力的复本测验结果 ABCDE FGH I J
两次施测的,同一组被试施测结果的 一致性程度 。
课前提问:
何谓重测信度,要满足那些条件时,使用重测信度才 是有意义的?
何谓复本信度,使用复本信度的前提有哪些?
重测信度 复本信度 内部一致性信度 评分者信度
Internal consistency reliability— —指的是测验内容的一致性或测 验内部所有题目的一致性(项目 同质性)程度。又称同质性 (homogeneity)信度。主要反映测 验或分测验的单维性。
X1X21324
X1 112
X2 110
X121334 X221324 rtt 0.97
重测信度 复本信度 内部一致性信度 评分者信度
Alternate-form reliability—— 同 一被试样本在同一测验的两种形 式上得分的一致性程度。又称等 值性信度。代表能够将测验分数 概况到不同测验形式的程度。
重测信度的使用条件:
1. 所测量的心理特质必须是相对稳定 的;
2. 测量中不能有练习效应和遗忘效应;
3. 不能存在差别学习的效果;
重测信度 复本信度 内部一致性信度 评分者信度
重测信度的使用条件:
1. 所测量的心理特质必须是相对 稳定的;
重测信度 复本信度 内部一致性信度 评分者信度
重测信度的使用条件:
rtt
X1X2
X12
(
X1)2 n
X1 X2 n
X22
(
X2)2 n
重测信度 复本信度 内部一致性信度 评分者信度
重测信度的计算公式:
皮尔逊积差相关系数
rtt
X1 X 2 n
X1 X 2
S S X1 X2
重测信度的计算
10名学生幸福感调查的两次施测分数
ABCDE FGH I J X1 16 15 13 13 11 10 10 9 8 7 X2 16 16 14 12 11 9 11 8 6 7
1. 施测所用的两个复份必须是真正平行 的测验(即A、B卷) ;
2. 被试要有条件接受两个测验;
重测信度 复本信度 内部一致性信度 评分者信度
复本信度的使用条件:
1. 施测所用的两个复份必须是真正平行 的测验(即A、B卷) ;
重测信度 复本信度 内部一致性信度 评分者信度
复本信度的使用条件: 2. 被试要有条件接受两个测验;
• 这个学生的总分为5分,3个奇数题正确,2个偶数 题正确。
表4.3 5名被试测验结果
被试 A B C D E
奇数题得分 3 5 4 1 4
偶数题得分 2 5 4 1 5
BACK
满足等值性时,使用
• 斯皮尔曼-布朗公式
(Spearman-Brawn)
rX X
2 n
信度系数与信度指数
信度指数:相关系数 信度系数:相关系数的平方
注意:
(1)信度系数有多种; (2)同一种信度系数也会因样本、测查 时间不同而有多个; (3)信度系数只是对测量分数一致性的 估计,但并没有指出不一致的原因; (4)获得较高的信度只是测验有效的必 要条件;
例 奇偶分半法
• 如一个学生对10道题回答为(正确答案标记为+, 错误答案标记为-): 1.+ 2.+ 3.- 4.+ 5. +; 6.- 7.- 8.- 9.+ 10.-;
K
S2
(1 i )
K1
SX2
荷伊特(S. Hoyt)信度
rXX
1 MSPI MSP
重测信度 复本信度 内部一致性信度 评分者信度
scorer reliability——指多个评分 者给同一批人的答卷进行评分的 一致性程度。
两人评分时:积差相关或等级相关;
多人评分时:肯德尔和谐系数;
W 12
Ri =14+7+13+18+8+3=63
Ri2 =142+72+132+182+82+32=811
由题意知 K=3, N=6, 将上述值代入公式有:
W= 12811632 /6 3263 6
=0.95
• 如在评定中有相同的等级时,用下式校正。其中n为 相同等级的个数
R i2 R i 2/N
重测信度 复本信度 内部一致性信度 评分者信度
重测信度虽然最为直接地代表了信度 的内涵,但并非所有的心理测验都适 合计算重测信度。重测信度的误差来 源包括:测验本身所测的特性不稳定; 被试的成熟、学习、练习和遗忘的效 果并非人人等量增长;某次施测时偶 发因素,如计时错误、情绪波动、健 康状况、动机变化等;
rKKKK 1(SX 2
SX 2
piqi )
GO
K-R21公式(适用于以1、0记分,各题 难度近似)
或 rKK
K (1Kpiqi
K1
SX2
)
rKKKSX2(KX1()KSX2X) GO
重测信度 复本信度 内部一致性信度 评分者信度
多值记分测验的内部一致性系数计算 方式:
克伦巴赫(Cronbarch)系数( 系数)
不满足等值性时,使用
• 弗拉南根(Flanagan) 公式
rXX
2(1
Sa2 Sb2 SX2
)
• 卢伦(Rulon)公式
rX X
1
S
2 d
S
2 X
表4.4 初一学生地理成绩测验内在一致性信度系数计算表
BACK1
BACK2
如果测验有多个分量表,应在分量表 内部排好顺序,再把各分量表的两半 组合起来求相关;
重测信度 复本信度 内部一致性信度 评分者信度
分半信度(split-half reliability)是指将
一个测验分成对等的两半后,所有被 试在这两半上所得分数的一致性程度。
计算方法:
1. 确定分半方法
2. 计算两半相关系数
信度的种类和估计方法
学习目标:
1. 理解重测信度、复本信度、内部一 致性信度以及评分者信度的含义及 使用条件;