当前位置:文档之家› 信度与效度分析.

信度与效度分析.


2. 复本信度
复本信度法是让同一组被调查者一次填答 两份问卷复本,计算两个复本的相关系数。复 本信度法要求两个复本除表述方式不同外,在 内容、格式、难度和对应题项的提问方向等方 面要完全一致,而在实际调查中,很难使调查 问卷达到这种要求,因此采用这种方法者较少。
2. 复本信度(alternate form reliability )
2. 系统误差(systematic error)
系统误差是指由于偏倚(使测量结果系统 地偏离真值, bias)产生的错误结果,与 随机误差不同,可校正和消除。
3. 随机测量误差
随机测量误差(random measurement error) 是指在测量过程中,即使消除了系统误差, 但由于各种偶然因素的影响也会造成对同一 个体的多次测量结果的不一致,测量结果发 生的偏差往往不具有方向性。信度主要受随 机测量误差的影响,

误差的分类
误差( error)是指对事物某一特征的度量值偏
离真实值的部分,即测定值与真实值之差,样
本统计量与总体参数之差。
X T B E
实测值 真实值 系统误差 测量误差

误差的分类
1. 抽样误差 抽样误差(sample error) :由于抽样 造成的样本指标与总体指标之间及各样本 指标之间的差异。与测量的优劣没有必然 的联系,进行信度和效度分析时,可以忽 略抽样误差。
X T B E
实测值 真实值 系统误差 测量误差
信度是用估计测量误差大小的尺度,来说明 测量结果中测量误差所占的比例。 信度可定义为真实分数(true score)的方差 与测量实得分数(observed score) 的方差之比 ,当实得分数变异可以全部由真实分数的变异解 释时,测量误差就是0,这时测量结果的信度为 1。
若用变异表示测量结果的信度,理论上应有
rXX
2 T 2 X

2 E rXX 1 2 X
2 式中 T 表示真实分数的方差;
2 X 表示实得分数的方差; 2 E 表示误差的方差。
信度包含两层含义: 一是相同的个体在不同时间,以相同的测 量工具测量,或以复本测量,或在不同的情景 下测量,是否能得到相同的结果,即测量结果 是否随时间和地点等因素而变化; 二是能否减少随机误差对测验结果的影响, 从而能够反映测量工具所要测量的真实情况, 即测量结果是否具有稳定性、可靠性和可预测 性。一个好的测量工具必须是稳定可靠的,且 多次测量结果应前后一致。
第2 讲
信度与效度分析方法
根据调查目的设计的调查问卷是一种测量工具 。其质量高低对调查结果的真实性、适用性等具有 决定性的作用。为了保证问卷具有较高的可靠性和 有效性。在形成正式问卷之前,应当对问卷进行试 测,并对试测结果进行信度和效度分析,根据分析 结果筛选问卷题项,调整问卷结构,从而提高问卷 的信度和效度。 调查问卷的信度和效度分析绝非赘疣蛇足,而 是研究过程中必不可少的重要环节。信度和效度分 析的方法包括逻辑分析和统计分析。
第一节 信度分析方法
一、信度的概念
信度(Reliability)即可靠性,是指根据测量工 具所得到的测量结果的一致性或稳定性,反映客观 事物被测特征真实程度的度量指标。一般而言,两 次或两个测量的结果愈是一致,则误差愈小,所得 的信度愈高。
信度(reliability)又称稳定性或精确度。用 以反映在相同条件下,对同一客观事物测量若 干次,测量结果的相互符合程度或一致程度, 说明数据的可靠性。当使用同一测量工具重复 测量某一客观事物时所得结果的一致程度越高, 则该测量工具的信度就越高。
复本通常是根据相同的设计说明分别独立 编制的两个平行问卷,即题目不同但是内容相似 的两份问卷。复本信度也叫等值性系数 (coefficient of equivalence)。两个复本间 隔一定时间或同时施于同一答卷者所得分数的相 关系数就是复本信度。
重测信度的计算方法
( X )( Y ) n
2
r (
XY ( X ) X
2
n
)( Y
2(Biblioteka Y ) n2)1. 重测信度
(2)对两次重复测试结果进行两个相关样本 差异的统计检验,如果差异有统计学意义, 则认为测量工具的信度低,否则,信度高。
1. 重测信度
重测信度法特别适用于事实式问卷,如性别、 出生年月等在两次施测中不应有任何差异,大多数 被调查者的兴趣、爱好、习惯等在短时间内也不会 有十分明显的变化。如果没有突发事件导致被调查 者的态度、意见突变,这种方法也适用于态度、意 见式问卷。由于重测信度法需要对同一样本试测两 次,被调查者容易受到各种事件、活动和他人的影 响,而且间隔时间长短也有一定限制,因此在实施 中有一定困难。
三、信度的种类及计算
信度主要分为四大类:
重测信度(Test-retest Reliability) 复本信度(Alternate-form Reliability)
内部一致性信度(Internal Consistency Reliability)
评分者信度(Scorer Reliability)
1. 重测信度
三、 信度的种类及计算方法与评价
信度主要是指测量工具是否精准(precision)。 信度分析涉及了问卷测量结果的一致性和稳定 性,其目的是如何控制和减少随机误差。 信度指标多以相关系数表示,大致可分为三类: 稳定系数(跨时间的一致性),等值系数(跨形式 的一致性)和内在一致性系数(跨项目的一性)。
重测信度是指用同样的测量工具,对同一组被 调查者间隔一定时间重复测试,两次测试结果的相 关程度。重测信度可以通过两种途径进行考察: (1)计算两次测试结果的相关系数,如果经过 统计检验,相关关系有统计学意义,则认为测量 工具的信度高,否则信度低。也有人提出,测量 工具的重测信度可以接受的标准是两次测试的相 关系数在0.7以上。
问卷(量表)测量中的测量误差通常来源于 两个方面: 一是产生于问卷(量表)测量过程中的误差, 称为测量误差(measurement Error),也称为随 机误差(random error); 二是由问卷(量表)的结构质量造成的误差, 称为系统误差(system Error)。
measurement Error reliability system Error validity
相关主题