调查问卷的信度与效度分析
二是统计分析法,即从同一内容总体 中抽取两套问卷,分别对同一组答卷者进 行测验, 两种问卷的相关系数就可用来估 计问卷的内容效度。
计算某个问题与去掉此问题后总得分 的相关性情况,分析是否需要被剔除(敏 感性分析)。
(2)结构效度
结构效度又称构想效度,是指问卷 对某一理论概念或特质测量的程度,即 某问卷测验的实际得分能解释某一特质 的程度。如果我们根据理论的假设结构, 通过问卷测验得到答卷者实际分数,经 统计检验,结果表明问卷能有效解释答 卷者该项特质,则说此问卷具有良好的 结构效度。
一般常用的效度指标有内容效度、结 构效度。
(1)内容效度
内容效度是指问卷内容的贴切性和代表
性,即问卷内容能否反应所要测量的特质,能
否达到测验目的,较好地代表所欲测量的内
容和引起预期反应的程度。内容效度常以题
目分布的合理性来判断,属于命题的逻辑分
析,所以,内容效度也称为“逻辑效度” 、
“内在效度”、“循环效度”。
效度是指问卷测验的准确性, 即测验能够反映所要测量特性的程度. 其包括两个方面的含义: 一是问卷测验的目的; 二是问卷对测量目标的测量精确度和真实性。 效度是一个具有相对性、连续性、间接性的 概念。
在测量理论中,效度被定义为在一系列测 量中,与测量目的有关的真变异数 ( 即有效变 异 ) 与总变异数之比:
调查问卷的信度与效度分析
路漫漫其悠远
少壮不努力,老大徒悲伤
一、why
效度?
信度?
1.误差公理
误差(error)是指对事物某一特征的度量
值偏离真实值的部分,即测定值与真实值之
差,样本统计量与总体参数之差。
没有一项研究推论能够达到百分之百的 真实。 No study is free of errors, the inferences are never perfectly valid.
若用表示问卷测验的信度,理论应有
r XX
S
2 X
式 表SS中示TX22 实S T得或2 表分示r数X真X的实方1分差数SS;XE的22 方差;
S2 Eຫໍສະໝຸດ 表示误差的方差。三、How
3.1 调查问卷的效度检验 3.2 调查问卷的信度检验
How
三、调查问卷的效度检验
3.常用的效度指标
确定一个问卷效度的方法,通常是以 答卷者的问卷得分和另一个效度标准求相 关,以其相关系数的大小来表示效度。如 果相关系数高,则该问卷的效度就高。
r
2 xy
S
2 v
S
2 x
r2xy 表示测量的效度系数,Sv2 代表有效
变异数,Sx2 代表总变异数。
1.信度分析的意义
信度的定义
信度是用估计测量误差大小的尺度,来说明问 卷测验结果中测量误差所占的比率。
信度可定义为真实分数的方差与测验实得 分数 的方差之比,当实得分数变异可以全部 由真实分数的变异解释时,测验误差就是0, 这时问卷测验的信度为
抽样误差(sample error) :由 于抽样造成的样本指标与总体指标 之间的差别。
(2)系统误差(systematic error)
是由于偏倚(使研究结果按照一个方 向偏离总体)产生的错误结果,可校正和 消除。
(3) 过失误差 是由于科研设计错误,或实 验者的主观片面、粗心大意引起的误差。必 须避免和剔除!
误差公理:实验结果都会有误差,误差
自始至终存在于一切科学实验的过程之中。
2.误差的种类(types of error)
(1)随机误差(random error) 随机误差是由不确定原因引起的,不可避
免和消除。 其偏离总体的方向不能确定。包 括随机测量误差和抽样误差。
随机测量误差(random measurement error) :没有固定的倾 向,可使多次观测结果有大有小。
3.效标效度
效标效度也称为准则关联效度、
经验效度、统计效度。效标效度是说明
问卷得分与某种外部准则(效标)间的
关联程度,用问卷测量得分与效度准则
之间的相关系数表示。
一般估计效标效度的主要方法有:
(1)相关法,即求某问卷分数与效标间 的相关,所得结果即效标效度。
(2)区分法,即看问卷分数是否可以区 分由效标所划分的团体。
常用的确定结构效度的方法有:
(1)根据文献、前人研究结果、实际经验等建 立假设性理论建构; (2)对问卷题目进行分析。主要是分析问卷的 内容,答卷者对题目所作的反应,问卷题 目的同质性以及分项目之间的关系来判断 问卷的结构效度; (3)根据建构的假设性理论编制适当的问卷; (4)计算与同类权威问卷的相关; (5)以统计检验的实证方法去考查问卷是否能 有效解释所欲建构的特质。
可以运用t检验对先后两次问卷结果平 均分数进行差异性检验。若差异有统计学 意义,说明问卷是有效的;若差异无统计 学意义,说明问卷是无效的。
(4)判别效度
判别效标也称为辨别效标,是 指运用相同的问卷测定不同特质和 内涵,测量结果之间不应有太大的 相关性。
(5)聚合效度
聚合效度也称为收敛效度,是指 运用不同测量方法测定同一特质所 得结果的相似程度,即对同一特质 的两种或多种测定方法间应有较高 的相关性。
6.效度的评价
如果满足以下5个条件就可以认为问卷有 效:
(1)问卷有内容效度和结构效度; (2)在问卷制定阶段应当请有关人员提出意
见,供修正和提高内容效度; (3)问卷经过反复使用证明了其可靠性;(
内容效度的评价主要通过经验判 断进行,通常考虑3方面的问题:
其一是项目所测量的是否真属于 应测量的领域;
其二是测验所包含的项目是否覆 盖了应测领域的各个方面;
其三是测验题目的构成比例是否 恰当。
常用的内容效度的评价方法有两种:
一是专家法,即请有关专家对问卷题 目与原来的内容范围是否符合进行分析,作 出判断,看问卷题目是否较好地代表了原 来的内容。
问卷测验中测量误差通常来源于两个方 面:
一是产生于问卷测验过程中的误差,称 为测量误差(measurement Error),也称 为随机误差(random error);
二是由问卷的结构质量造成的误差,称 为系统误差(system Error)。
二、what
效度 信度
2、效度的定义