第七章研究工具性能的测定学习目标掌握1.信度的概念2.信度的不同特征与测量方法3.效度的概念；效度的多种表达形式熟悉计算信度的方法熟悉建立和测量效度的方法了解国外量表的翻译步骤第一节研究工具的信度（reliability)一、基本概念：定义：使用研究工具所获得的结果的一致程度或准确程度信度的三个主要特征1、稳定性用同一工具两次或多次测定同一研究对象，所得结果的一致程度。

一致程度越高，工具的稳定性越好。

2、内在一致性组成研究工具的各项目之间的同质性和内在相关性。

内在相关性越大或同质性越好，工具的内在一致性越好，信度越高。

3、等同性不同评定者使用相同工具同时测量相同对象时，评定者间的一致程度；或大致相同两个研究工具同时被用于研究对象，工具的一致程度。

二、信度的测量方法稳定性测量——重测信度内在一致性测量——折半信度Cronbach’α系数KR-20值等同性测量——评定者间信度复本信度1、重测信度(test-retest reliability)定义: 用同一工具两次或多次测定同一研究对象所得结果的一致程度。

常表示研究工具的稳定性。

一致程度越高，重测信度越高，研究工具的稳定性越好。

计算方法：使用研究工具对研究对象施行第一次测试,间隔一段时间后使用同一工具对同一研究对象进行重测，然后计算两次资料的相关系数，该系数反映研究工具重测信度的高低。

相关系数在0～1之间，越接近1，说明重测信度越高。

研究对象第一次测试（X）第二次测试（Y）例：人格问卷重测数值表例： 第一次测试和第二次测试数据间的相关系数即为人格问卷的重测信度。

公式如下：X ∑ ：第一次测试10名研究对象各得分之和 Y ∑ ：第二次测试10名研究对象各得分之和2X ∑ ：第一次测试10名研究对象各得分平方之和 1 23 272 44 383 35 374 53 495 44 466 26 287 32 348 28 259 38 341039 362Y ：第二次测试10名研究对象各得分平方之和使用重测信度需考虑的问题两次测量之间的间隔时间1）使第一次测量对第二次测量的结果不会造成影响；2）在客观情况未发生改变时进行；测量环境的一致尽量保证测量环境的一致，如相同的测试者、相同的测量程序、相同的测量时间、相同的测量环境等工具所测量的变量的性质：1）对性质相对稳定的问题，如个性、价值观、生活质量等进行测量，适宜用重测信度来表示研究工具的信度如何；2）对性质不稳定的问题，如情感、态度、知识等进行测量，则不宜使用重测信度来表示研究工具的信度如何。

二、信度的测量方法2、折半信度(split -half reliability)定义：将一种工具对一群人使用一次，将每个人的结果分数按工具中各项目分成两组，计算两组分数的相关系数。

常用来反映研究工具的内在一致性方法: 前后折半法奇偶折半法缺点: 不同的折半方法会导致不同的结果计算：根据重测信度中列出的公式计算r 系数，再使用Spearman -Brown 公式校正。

3、Cronbach ’α系数计算研究工具中所有项目间的平均相关程度，反映研究工具的内在一致，避免了折半信度计算的缺点。

系数值在0-1之间，越接近1，研究工具的内在一致性越好，信度越好。

K 为整个调查表的条目数，Si 为第i 个条目得分的方差，S 为整个调查表得分的方差。

4、KR -20值是Cronbach ’α的一种特殊形式，用来反映研究工具的内在一致性。

适用于二分制的研究工具，如回答“是”或“否”、“正确”或“错误”。

5、评定者间信度和复本信度常用于测定研究工具的等同性评定者间信度测量方法：不同评定者使用相同工具同时观察，计算观察者们的观察结果之间的相关系数。

复本信度测量方法：将两种不同形式的工具同时对一群对象测试，然后计算两次工具得分的相关系数。

6、研究工具信度的基本要求1）通常通过预试验测试研究工具的信度2）报告研究工具的信度时，不仅要报告信度系数，还应报告是何种信度，信度系数是如何计算的。

3）一般认为，研究工具重测信度和内部一致性信度系数最小应大于0.7，0.9以上非常好。

而评分者信度和复本信度一般应达到0.9以上。

第二节效度（validity）定义：某一研究工具能真正反映它所期望研究的概念的程度。

计算效度的方法：表面效度内容效度结构效度效标关联效度1、表面效度(face validity)定义: 由评估人根据自己对所要测量的概念的理解，尽其断断能力之所及来断定工具是否恰当。

属于一种直觉判断。

方法：从表面上检查工具的性质缺点:1）缺少实际证据证明工具一定有效。

2）对工具的效度用“有或无”反映，未体现程度。

2、内容效度(content validity)定义：根据理论基础及实际经验对工具是否反映了所要测量的变量、包括足够项目而且有恰当的内容分配比例等所作出的判断。

有时也称专家效度。

方法：从内容上检查工具的性质实施要求：1）专家人数3-10人，以5人较合适2）专家的选择应与研究工具所涉及的领域有关3）两次评议时间最好间隔10-14天3、效标关联效度（criterion-related validity)定义：反映研究工具与其他测量标准之间的关系。

分类：同时效度预测效度同时效度：测量研究工具与现有标准之间的相关关系。

预测效度：测量工具作为未来事情预测指标的有效程度。

同时效度和预测效度的主要区别：时间差异4、结构效度(construction validity)定义：反映工具与其所依据的理论或概念框架的相吻合程度。

方法：因素分析法——探索性因素分析验证性因素分析评价：结构效度是目前最为严谨的一种建立和测量研究工具效度的方法，也是最为复杂的效度研究方法。

5、信度和效度关系1、信度是效度的必要前提高信度不能代表高效度低信度则可以肯定低效度2、效度是信度的必然保证有效度的工具一定有信度有信度的工具未必有效度5、信度和效度关系高信度、低效度高信度、高效度低信度、低效度第三节国外量表的翻译和应用过程的性能测定翻译和应用国外量表的原则：1、不偏离原文的原意2、适合中国的文化特点3、译后的量表具有较好的信度和效度翻译国外量表的步骤：1、翻译两个或多个既熟悉原量表语言又有较好汉语功底的翻译者将国外量表翻译成中文；注意直译与意译结合，使更适合中国文化特点；多个翻译版本进行集体讨论后形成中文版本的量表。

2、回译请语言功底好、对源量表不知情的一位或多位翻译者将翻译成中文的量表再翻译回去；将原量表与回译后的量表进行细致比较和分析，找出不同的部分，并对中文版的相应内容进行修改；修改后的中文版进行表面效度检验。

3、检译寻找一定数量的既懂中文又懂源语言的样本对两种语言版本的量表进行作答，计算不同语言版本的量表得分的相关性。

相关程度越高，表示两种版本的等同性越好。

使用中文版本进行预试验，检测中文版量表的内在一致性，并了解量表文字是否易于理解和符合中国人的表达习惯。

思考题：1. 信度的概念、类型及主要特征。

2. 效度的概念、类型。

3. 信度与效度的关系与区别。

4. 重测信度、折半信度、评定者间信度、复本信度的概念与意义。

5. 表面效度、内容效度、效标关联效度、结构效度的概念与意义。

一、单选题1.下列四种效度中最能说明研究工具质量好坏的是【D】A．表面效度B．内容效度C．效标关联效度D．建构效度2.下列哪项对于信度和效度关系的描述是正确的（D）A、研究工具可以只有信度而无效度B、信度低的工具效度有可能高或低C、信度高的工具效度必然高D、信度高的工具效度可能低3.下列属于信度的主要特征的选项是（B）A、可操作性B、内在一致性C、敏感性D、精确性二、多选题下列对信度和效度关系的描述正确的选项是（ACDE）A、只要研究工具存在，就必然有它的信度和效度B、信度高的工具其效度也高C、信度低的工具其效度必然也低D、信度和效度都是表示研究工具好坏的指标E、效度低的工具其信度可以高信度的主要特征是（ABD）A、等同性B、稳定性C、合适性D、内在一致性E、敏感性三、名词解释信度：指使用某一研究工具重复测量某一研究对象时所得结果的一致程度（也可被定义为使用某一研究工具获得的资料所能反映被研究对象真实情况的准确程度。

）效度：指某一研究工具能真正反映它所期望研究的概念的程度。

反映期望研究的概念的程度越高，效度越高。

四、简答题简述信度和效度的关系。

1）只要研究工具存在，就势必有它的信度和效度2）研究工具的信度和效度不是“有”或“无”的问题，而是程度上“高”或“低”。