当前位置:文档之家› 心理测量 第六章 项目分析

心理测量 第六章 项目分析


确定方法(续)

鉴别指数
比较两个极端效标组通过一个项目的个案的比例 当效标测量是个连续变量(如学业分数、产品数量) 时,可从分布的两端选出高分组和低分组。两组的 通过率的差异提供了题目区分度的指标 鉴别力指数D:D=PH-PL 条件:假定项目和效标之间是直线关系


极端组的划分:


正态分布中,最佳划分点为上下27%,以此划分, 可以使两个对比组之间的差异尽可能大,又使两组 人数尽可能多。 团体较小时,25%~33%之间的数字均可作分界点 被试数量N<100时,也可取50%为分界
3.难度水平的确定



难度水平的确定取决于测验的目的、性 质及项目的形式 教育测验(掌握性测验)或标准参照测 验可不考虑难度水平 选拔测验中选取难度值接近录取率的项 目。此外选择题目时,难度值应大于随 机答题概率。
4.测验的难度

测验难度是对整个测验的难度的综合性 检验,可由分数分布提供


分数分布为正偏态,即分数密集在低端时, 测验难度偏高 分数分布为负偏态,即分数密集在高端时, 测验难度偏低

最好用前测-后测结果比较来进行项目分析
根据测验目的,选择或淘汰能引起一定团体 显著差异的项目

项目-团体的相互作用


有效性与可靠性的矛盾
第六章
内容提要 概述 难度 区分度
项目分析
一、什么是项目分析?


项目分析:根据被试的反应对组成测验的各个 题目(项目)进行分析,从而评价其功用的程 序的方法。 两类项目分析:


定性分析 效性等 定量分析
考虑内容效度,题目编写的恰当性和有
主要是难度和区分度

作用:通过项目分析,研究者可以选择和修改 测验题目,从而提高测验的信度和效度
以鉴别指数评价试题(L.EBel)
D 0.40以上 0.30~0.39 试题评价 非常优良 良好,如能修改更佳
0.20~0.29
0.19以下
尚可,仍需修改
劣,必须淘汰
3.区分度与难度的关系

难度影响区分度,难度大或小,区分度 均低。中等难度水平,区分度较高。
三、项目分析的特殊问题

备选答案的反应模式 速度测验的项目分析 标准参照测验的项目分析
பைடு நூலகம் 1.确定方法

项目与效标的相关




以项目分数与效标分数(或测验总分)的相关作为 项目区分度的指标,相关越高,区分能力越好。 据变量的性质选择以下不同相关系数:二列相关/点 二列相关/四分相关/φ 相关 实际上,选择不同相关系数仅是用于编制测验取舍 项目时。不同的系数对相同的项目产生同样的等级 次序。 使用前提:当每一项目的变异数相同或项目很多, 每一项目所贡献的变异数比例都很小时,才能使用 项目和总分的相关。否则项目本身包含于总分中, 若变异数贡献太大,这个重叠(伪因素)本身就可 引起某种正相关。
2.区分度的相对性


不同计算法区分度估计值不同 受样本大小影响。一般样本数目越大,估计越 可靠,但贡献遵循报酬递减原则。 受分组标准影响 区分度大小与样本的同质性有关

样本同质性越高,区分度值越小;区分度小的项目, 施测于较大差异性的团体,也可能具有很高鉴别力

此外,还要考虑测验的目的、性质和功能。例 如教育成就测验,要求项目与总分相关>0.20, 高低分组通过率之差达到0.15~0.20以上
三、区分度



区分度指测验项目对所测量的心理特性的区分 程度或鉴别能力,也是项目的效度。 区分度指标和估计方法,都是以受测者对项目 的反应与某种参照标准之间的差异为基础的。 当外在效标难以得到时,通常用测验总分(即 所有项目的分数之和)代替。 假定测验总体是对该特征的一个适当测量,项 目越多,误差互相抵消的越多。
二、难度
1.界定 难度即题目的难易程度。难度指标通常 以通过率来表示。P=R/N*100% 难度主要用于能力测验,非能力测验中 类似的指标是:“通俗性”、应答率、 同一类人在关键方向上回答的人数
2.难度的计算



二分法计分的项目,被试人数少时 P=R/N*100% 二分法计分,被试人数多时,分三组 高分组27%,低分组27%,中间组46% P=(PH+PL)/ 2 非二分法计分的项目 P=X/Xmax *100%,式中X为全体被试在该题 上的平均分, Xmax为该题满分

当难度接近0.5时,表明多数被试正确回 答50%的题,此时对被试有最大程度的 区分。
5.常态化等距难度量表




以通过率(百分比)作为难度指标,实际上是 以顺序量表来表示难度,它仅能指出难度的顺 序或相对难度高低,无法得知差异大小 当被试在所测特性上呈正态分布,则可以根据 正态曲线次数表,用以标准差为单位的等距量 表(即Z分数)来表示。 将难度转换成具有相等单位的等距量表,此等 距难度量表可指出不同难度间差异数值 以标准差为单位的项目难度常常有负值和小数, 使用不便。ETS的转换方法:△ =13+4X
相关主题