特殊儿童测验的信度与效度分析-效度检测

测量的效度指一个测验或量表实际能测出其所要测的心理特质的程度。效度系数r=Sv2/Sx2，Sv：有效方差，SX：总方差。效度是个相对的概念效度是测量的系统误差和随机误差的综合反映判断效度要从多方面内容效度

测验内容对要测量的内容取样的适当程度。适用于成就测验和某些职业测验，不适用于能力测验、人格测验好的内容效度需要具备的条件：确定好内容的范围确定好题目所测的内容内容效度的确定专家判断法复本法再测法经验法注：要避免与表面效度相混淆。其实，表面效度不能算是一种效度，它不反映测验实际测量的东西。它是外行人对某个测验从表面上看好像是测某种心理特质的一种现象。当外行人认为某个测验能有效地测得某种心理特质时，该测验就被认为有较高的表面效度。一般来说，最佳行为测验往往表面效度高，其他测验则希望表面效度低。结构效度又称构想效度。指一个测验实际测到所要测量的理论结构和特质的程度，或者说它是指测验分数能够说明心理学理论的某种结构或特质的程度。适用于能力测验、人格测验。主要取决于理论，没有单一的数量指标结构效度的确定

测验内法：确定测验内容效度，分析被试对项目的反应过程，考察测验的同质性。测验间法： 相容效度：被试在新旧两个同类测验上分数的相关较高。 区分效度：与测验不同构想的测验分数相关较低。 因素效度：对一组测验进行因素分析，找每个测验和公共因素的相关。效标关联法：根据测验得分分成高分组低分组，考察在特质上是否有差异。多特质-多方法矩阵法：相容效度和区分效度法的综合运用，其原理是若用多种极不相同的方法测量同一种特质相关很高(用极为相似的方法测量不同特质相关很低)，则说明测量效度较高。实验操作法实证效度又称效标效度。指一个测验对处于特定情境中的个体的行为进行估计的有效性。效标：被预测的行为是衡量测验是否有效的标准。同时效度：效标资料和测验分数同时收集预测效度：效标资料在测验分数收集后过一段时间才能收集到。好的效标：真实反映观念效标的重要侧面，稳定可靠，客观，简单成本低。实证效度的确定

相关法分组法命中率法功利率法总命中率：(B+C)/(A+B+C+D)正命中率：B/(A+B)历年真题以学习成绩为效标，得到某一智力测验的效标关联效度为0.80。将此测验用于预测时，其测验结果可解释学习成绩变异的（C）（2007，全国统考） A.16%B.20%C.64%D.80%效度的影响因素

测验的构成：条目质量条目数量：r=n：测验增长倍数，rxy：原测验效度，rxx：原测验信度测验的实施被试：身心状态样本特点效标：是否线性信度提高效度的方法精心编制测验量表，避免出现较大的系统误差。妥善组织测验，控制随机误差。创设标准的应试情境，让每个被试都能发挥正常的水平。选好正确的效标、定好恰当的效标测量，正确地使用有关公式。信度与效度的关系

信度高是效度高的必要而不充分条件效度受信度制约rXY2<rXX例：（华东师大2002）效度与信度的关系

第一节测量效度一、什么是效度（validity）（一）效度的概念效度是指一个测验或量表实际能测出其所要测的心理特质的程度。或者说实测结果与所要测查的结果的吻合或一致程度。例如：

一个小学数学测验的成绩若同时受到数学能力和语文能力（读懂题意的能力）的影响，测试结果成绩低，就不能认为实际所要测的数学能力这一心理特质水平不高。关于效度应该注意以下几个方面：1.效度是一个相对的概念，其相对性表现在：（1）效度是相对于测量目的而言的。一个测验或量表是否有效主要看它是否达到了测量的目的。（2）心理特质是比较隐蔽的特性，心理测量不可能百分之百的准确，只能达到一定的准确度。2.效度是随机误差和系统误差的综合反映。3.判断一个测量是否有效要从多方面收集证据。

（二）效度的测量学定义二、效度与信度的关系三、效度的估计由于测量效度是就测量的结果达到测量目的的程度而言的，所以测量效度在很大程度上取决于人们对于测量目的的解释。效度的种类很多，分类方法也有所不同。目前被广泛采用的是弗兰士（J.W.French）和米希尔（B.Michel）提出的分类方法：他们将效度分为内容效度、结构效度（构想效度）和效标效度（实证效度）。1.内容效度的含义及其应用的范围内容效度是指一个测验实际测到的内容与所要测的内容之间的吻合程度。估计一个测验的内容效度就是确定该测验在多大程度上代表了所要测量的心理特质。或者说内容效度就是测验的测题对测验内容范围的代表程度。（一）内容效度（contentvalidity）一个测验要有好的内容效度必须满足以下两个条件：（1）确定好测验内容的范围，并使得测验的全部项目均在此范围内。（2）确定好行为样本及其不同行为样本项目的比例。2.确定内容效度的方法（1）专家判断的方法内容效度的确定方法主要是逻辑分析的方法。其工作思路是请专家对测验题目与原定内容范围的吻合程度作出判断。步骤如下：①明确测验目的及测验内容的范围②确定每个题目所测的内容，并与测验编制者所列的双向细目表对照③制订评定量表，考察题目对所定义的内容范围的覆盖率、判断题目难度与能力要求之间的差异等。（2）复本法（3）重测法（4）经验法3.内容效度的应用内容效度主要应用于成就测验以及职业选拔和分类测验。在这类测验中，测验内容是实际工作所需要的知识和技能。使用内容效度要注意与表面效度（surfacevalidity）的区别。表面效度是指一个测验在使用者和被试看来，直觉地认为它在测量什么，是否测到了测验所要测量的内容。表面效度不是效度。1.结构效度的含义、特点与应用范围结构效度是指一个测验实际测到所要测量的理论结构和特质的程度，或者说测验分数能够说明测量的理论结构和特质的程度。结构效度有如下特点：

（二）结构效度（constructvalidity）（1）结构效度首先取决于事先假定的心理特质的结构理论（2）当实际测量的资料无法证实事先的理论假设时，并不一定就表明该测验结构效度不高。（3）结构效度通过测量什么、不测量什么的证据积累起来给以确定的，因而不可能有单一的数量指标来描述结构效度。结构效度主要应用于智力测验、人格测验等一些心理测验方面。2.结构效度的确定确定结构效度的基本程序第一，对所研究的心理特质的结构进行界定第二，依据理论框架，提出可能的假设第三，收集数据，验证假设确定结构效度的具体方法（１）测验内法研究测验的内部结构，如测验的内容与题目间的相关来分析测验的结构效度。①确定测验的内容效度：对于“语文能力”的测验，语文能力是对词汇下定义、对语言进行类比推理和文章篇句中正确运用文字的能力。②分析被试对项目反应的过程：

观察被试的操作，询问他们的解题过程，做必要的数据相关分析。③考察测验的同质性。④因素分析的方法⑤结构方程的方法（2）测验间法通过对几个测验的比较研究，找出它们所测的共同特质，这样便可以确定这些测验是否具有结构效度。①相容效度：计算被试在新旧两个同类测验上的分数的相关。如果相关高，则说明两个测验测的是相同的特质。②区分效度：一个有效的测验不仅与其它测量同一构想的测验有比较高的相关，而且还应与测量不同构想的测验具有比较低的相关。（３）效标关联法（４）实际操作法（三）效标效度（实证效度）1.效标效度的含义、种类与作用效标效度是指一个测验对于特定情境中的个体的行为进行估计的有效性，即根据测验所作出的预测能否被实际的结果所证实。比如学习能力测验，如果测得某些学生的学习能力高，他们实际的学习成绩高，测得某些学生的学习能力低，实际的学习结果成绩低。测量的实证效度高。这里被估计或预测的行为的实际结果是检验测验效度的标准，简称效标。

根据效标资料搜集的时间，效标效度可以分为同时效标和预测效标。效标资料与测验分数是同时收集的，获得的效度叫同时效度；效标资料是根据测验之后的实际业绩定的，获得的效度叫预测效度。同时效度主要用于诊断现状，预测效度在于预测个体将来的行为。2．效标与效标测量估计测验效标效度首要条件是必须具有效标，什么是效标？效标就是衡量一个测验是否有效的外在标准，是我们所要预测的行为。效标可以是连续变量（如分数），也可以是分类变量（如职业）；可以是自然的现成的指标（如产量、薪水），也可以是人为设计的指标（如考试测验）；可以是主观评判，也可以是客观测量。归纳起来，常见的效标主要有学业成就、等级评定、临床诊断、特殊训练的筹集、实际工作表现和其他测验成绩。阿斯汀（A.W.Astin）将效标分为观念效标和效标测量。观念效标是一个概念，效标测量是观念效标的量化。如对于大学入学考试这个测验来说，观念效标是“大学学习成功”，而大学学习成绩是效标测量。好的效标测量应符合以下条件：（1）必须真实的反映观念效标的重要侧面（2）必须可靠稳定（3）必须客观，不存在偏见（4）在保证有效性的前提下，尽量简单省时、代价低。2.效标效度的确定方法效标效度的确定方法一般有三个步骤：明确观念效标，确定效标测量，考察测验分数与效标测量的关系。效标效度的估计方法：（1）相关法即计算测验分数与效标测量的相关系数：积差相关、等级相关、二列相关等。（2）分组法（区分法）是被试接受测验后，让他们工作一段时间，再根据工作成绩（效标测量）进行等级分组，然后考察两组测验分数的差异。（3）预期表法是将源测验分数和效标测量绘制成双维图表，并将每个变量按水平分成若干档次，然后列出每个档次上的人数百分比。（4）命中率法如果预测源与效标都是二分的，可以得到一个命中预测表（５）功利率法代价与利益进行比较四、影响测量效度的因素（一）测验工具1.项目质量测验项目不能够比较好的代表所要测验的内容和结构时，测量的的内容效度和结构效度必然不高。题目语义不清、指导语不明确，题目太难太易、题目安排不当等都会降低测量效度。2.项目数量增加项目的数量不但能够提高测验的信度，也可以提高测验的效度，增加项目数对于效度的影响效果可以通过下面公式估计：2.项目数量增加项目的数量不但能够提高测验的信度，也可以提高测验的效度，增加项目数对于效度的影响效果可以通过下面公式估计：（二）测验的实施（三）被试（四）效标的性质（五）测量的信度五、提高测量效度的方法（一）精心编制测验量表，避免出现比较大的系统误差（二）妥善组织测验，控制随机误差（三）创设标准的测试环境（四）选好效标，定好效标测量现在我们复习！我的测验应该做到既准确也精确。复习：怎样才能做到测验的准确性与精确性？信度保证了测验结果的稳定，但不能保证测验的精确。复习：准确与精确怎样用信度和效度来表示？信度保证了测验结果的稳定，但不能保证测验的精确。复习：信度与效度的组合类型真实的能力测验分数的能力测量的精度有效测到的能力测量的缺陷（没有没到的能力）测量的污染（虚假的测量）虽然有三个概念，但是是从不同的方面来说明效度的内涵。一.

效度的概念指所测量的与所要测量的心理特点之间符合的程度。指一个心理测验的准确性。指一个测验或量表实际能测出其所要测的心理特质的程度。效度是一个复杂的概念，要想把它理解好得多思考。一.效度的概念--对效度概念的正确理解效度是一个相对的概念。这种相对性表现在：效度是相对于一定的测量目的而言的。心理特质是较隐蔽的特性，只能通过他的行为表现来进行推测。测量只能达到某种程度的准确。效度是测量的随机误差和系统误差的综合反映。任一误差的存在，测量的效度都会受到影响判断一个测量是否有效要从多方面收集证据Sv表示真实方差，Sx表示总方差。一.效度的概念—效度的操作定义在一组测量中，与测量目标有关的真实方差（或称有效方差，由所要测量的变因引起的有效变异）与总方差(实得变异数)的比率，即你理解信度和效度的关系了吗？二、效度和信度的关系信度是效度的必要而非充分条件效度是受信度制约的

效度高必然信度高，而信度高并不一定保证效度高，说明信度高只是效度高的必然条件，并不是效度高的充分条件。

信度系数的平方根是效度系数的最高限度，一个测验的效度总是受它的信度所制约。效度信度这是效度的三个类别。三.效度的类型及评估方法内容效度构想效度效标效度核心概念是适用与代表。三.效度的类型及评估方法—内容效度的概念指的是项目对欲测的内容或行为范围的取样的适当程度。测验题目对有关内容或行为取样的适用性，从而确定测验是否是所欲测量的行为领域的代表性取样。定义：并不是所有测验都具备这些特征。三.效度的类型及评估方法—内容效度的条件所谓内容范围可以是具体知识或技能，也可以是复杂的行为。要对所测量的心理特性有个明确的概念，并划定出哪些行为与这心理特性有关。测验题目必须要有典型性，是测验内容的核心部分和重要部分。要确定好内容范围，并使测验的全部项目均在此范围内测验题目应是所界定的内容范围的代表性取样测验要具备较好的内容效度必须满足两个条件：这三种方法可以有选择地使用或一起使用。三.效度的类型及评估方法—内容效度的评估专家判断法定义好内容总体，并描绘出有关知识与技能的轮廓；划分细纲目，并根据重要性规划好各个纲目的加权比例，作出尽可能详细的描述；确定每道题所测的知识和技能，将自己的分类与测验编制的纲目作比较；制订评定量表，从各方面对测验作出评定。统计分析法复本法出了描述性语言外，内容效度的确定也可采用一些统计分析方法，符合程度越高越能反映测验的内容效度。内容效度可由一组被试在独立取得自同样内容范围的两个测验复本上得分相关来作数量的估计。再测法也可用于内容效度的评估，被试学习某种知识之前作一次测验，在学过该知识后再作同样的测验。若成绩显著提高，则说明所测内容正是被试新近所学的内容，进而证明该测验对这部分内容而言具有较高的内容效度。经验推测法通过实践来检验效度。如果通过率是随着年龄的增加而增加，就可以推测该测验有内容效度。内容效度应用广泛，但也有许多局限性。三.效度的类型及评估方法—内容效度的应用表面效度内容效度测验要求表面效度是由外行对测验作表面上的检查确定，它不反映测验实际测量的东西，只是指测验表面上看来好像是所要测的东西。内容效度则考虑到题目与测量目的和内容总体之间逻辑的微妙关系表面效度是一个必须考虑的特性，最高作为的测验通常要求有较高的表面效度；典型行为测验要求有较低的表面效度编制测验考虑的基本方面对标准参照测验更为重要评价教育成就测验和职业选拔测验考察内容效度与表面效度的关系缺乏可靠的数量指标妨碍测验间的相互比较内容效度的应用核心概念是结构与解释。三.效度的类型及评估方法—构想效度的概念指测验能够测量到理论上的构想和特质的程度。测验的结果是否能证实或解释某一理论的假设、术语或构想，解释的程度如何。定义：想确定一个测验有构想效度是很难的。三.效度的类型及评估方法—构想效度的特点数值大小证实性指标复杂其大小首先取决于事先假定的心理特质理论当实际测量的资料无法证实我们的理论假设时，并不一定就表明该测验结构效不高，因为还有可能是理论假设不成立，或者该实验设计不能对该假设作适当的检验等情况，当然这就使得结构效度的获取更为困难。结构效度通过测量什么、不测量什么的证据累积起来给以确定，因而不可能有单一的数量指标来描述结构效度。结构效度主要应用于智力测验、人格测验等一些心理测验方面。都是一种假设和验证的方法。三.效度的类型及评估方法—构想效度的确定方法提出理论假设，并把这一假设分解成一些细小的纲目，以解释被试在测验上的表现。依据理论框架，推演出有关测验成绩的假设。用逻辑和实证的方法来验证假设。这个关系图你看明白了吗？三.效度的类型及评估方法—构想效度的估计方法构想效度的估计方法测验内法测验间的相互比较相容效度区分效度因素效度效标关联法实验法和观察法证实测验内法就是对测验本身的分析。三.效度的类型及评估方法 —构想效度的估计方法

—测验内法测验的内容效度可以作为构思效度的证据；测验的同质性指标可以推断测验是测量单一特质还是测量多种特质，从而为评估测验构思效度提供证据；分析被试对题目的反应特点也可以作为构思效度的证据。测验间法就是对测验之间进行分析。三.效度的类型及评估方法 —构想效度的估计方法

—测验间法相容效度通过分析几个测验间的相互关系，找出其共同之处，进而推断这些测验测量的特质是什么，也可以确定这些测验的构思效度。相容效度是构思效度的一个证据。区分效度在一项测验中，如果你可以在统计上证明那些理应与你的建构不存在相关性的指标确实同建构没有相关，那么这项测验便具有区分效度。因素效度通过对一组测验进行因素分析，找到影响测验分数的共同因素，每个测验在共同因素上负荷量即每个测验与共同因素的相关，称作测验的因素效度。效标关联法就是把测验各外在特质进行分析。三.效度的类型及评估方法 —构想效度的估计方法

—效标关联法一个测验若效标度理想，那么该测验所预测的效标的性质和种类就可以作为分析测验构思效度的指标。另一种证实构思效度的方法是心理特质的发展变化。测验内法就是对测验本身的分析。三.效度的类型及评估方法 —构想效度的估计方法

—实验法和观察法证实观察实验前和实验后分数的差异是验证构思效度的方法。这是我们选择测验的依据。三.效度的类型及评估方法—构想效度的评价优点构想效度促使研究者把着眼点放在提出假设上、检验假设上，使得测验成为理论研究的重要工具，而不再只是实际决策的辅助工具，从而使测验有了更广阔的发展情景。缺点有些构想概论模糊，没有一致的定义，确定效度时没有明确的操作步骤，没有单一的数量指标来描述有效程度。效标效度有两个名称：效标效度、实证效度。三.效度的类型及评估方法—效标效度的概念测验预测个体在某种情境下行为表现的有效性程度。被预测的行为是检验效度的标准，简称效标。由于这种效度是看测验对效标预测如何，所以叫效标效度。这种效度需在实践中检验，所以又称为实证效标。定义：一个好的测验确定的效标必需具备这四个条件。三.效度的类型及评估方法—效标效度的条件（1）必须能最有效地反映测验的目标，即效标测量本身必须有效；（2）效标必须具有较高的信度，稳定可靠，不随时间等因素变化；（3）效标可以客观地加以测量，可用数据或等级来表示；（4）效标的测量的方法很简单，省时省力，经济实用。详细的效标分析请看下一页分析。三.效度的类型及评估方法—常用的效标常用效标学业成就实际工作表现特殊训练成绩精神病诊断等级评定效标团体的比较先前有效的测验这些常用的效标你一定要记住了。三.效度的类型及评估方法—常用的效标学业成就实际工作表现是最满意的效标测量，为一般智力测验、人格测验和一些能力倾向测验的效标特殊训练成绩是能力倾向测验常用的效标，其中也包括中间效标和最后效标的问题精神病诊断等级评定是观察者根据测验欲测量的心理特质在被试身上的表现而作出的一种个人判断效标团体的比较即找出两个在效标表现上有差别的团体，比较他们在测验分数上的差别先前有效的测验一个新测验与先前有效的测验的相关也经常作为效度检验的证据详细的效标分析请看下一页分析。三.效度的类型及评估方法—效标效度的表示方法相关法区分法命中率法预期表法功利率法不同测验使用不同的方法进行分析。三.效度的类型及评估方法—效标效度的表示方法相关法以皮尔逊积差相关系数来表示的，主要反映测验分数与效标测量的相关。区分法检验测验分数能否有效地区分由效标所定义的团体的一种方法。命中率法当测验用来做取舍的依据时，用其正确决定的比例作为效度指标的一种方法。预期表法一种双向表格，预测分数排在表的左边，效标排在表的顶端。用对角线分数区分。功利率法使用测验所花掉的费用与得到的利益进行比较，此种效度指标叫功利率。详细的效标分析请看下一页分析。四.影响效度的因素测验本身测验实施中的干扰样本团体的性质效标的性质详细的效标分析请看下一页分析。三.效度的类型及评估方法—效标效度的表示方法测验本身测验题目的质量测验的长度测验实施中的干扰主试的影响因素被试的影响因素样本团体的性质样本团体的异质性干涉变量效标的性质效标与测验分数间的关系效标测量本身的可靠性现在我们来复习。三.效度——复习效度的概念效度的操作定义效度和信度的关系效度的类型及评估方法内容效度构想效度效标效度影响效度的因素下课了！请您及时复习。测验结果分析1.简单明了，对结果的信度和效度有任何怀疑时要指出。2.报告结果应注意IQ的精确范围3.要解释的可靠性大，需要有许多材料均一致才可能办到。如行为观察结果，量的分析，型式分析，以往史等均一致。诊断一定在充足材料上作出。建议1作出建议的主要依据—智力的长处和弱点的型式，及其所牵连到的治疗和康复等。2目的：试图找出一种办法来帮助儿童，包括本人，教师、父母在教育和治疗上发生效应。3提建议的原则：实际可行，具体和个利化，并鼓励儿童自己投入到影响他的生活活动中。4

建议方面（1）为刺激和增进儿童心理发展的特殊提示。（2）关于发展失调型式的信息（3）建议要进一步评估时，要提出侧重何方面的评估。（4）建议治疗或治疗性教育的特殊形式（5）指出适合何职业的能力和长处。（6）对未来的预测：预测是困难的、冒险的，弄不好，对儿童带来损害。总结精明确简结，抓住要点，有2—3行字即行。书写报告时所要考虑的事项（（一）报告侧重点

分两种：测验方面；S方面例：×通过了词汇测验的8岁水平—测验×的词汇知识在8岁的平均水平—S方面（二）报告中用哪些材料

（1）取舍原则：根据申请中的问题性质，测量对象，被报告人的背景来决定材料取舍。（2）重点描述：无规定，只注意个体化。例如S的服饰，利手，身体结构特点等，哪一个重要？得因情况而异。（3）分测验名称，原始材料一般不提（读报告的也不懂），但偶然也可用来作例子提到。（三）陈述