内容效度ppt课件

1、第4章效度，第1节总结了第2节内容效度，第3节标准相关效度，第4节结构效度，第5节提高测量效度的方法，第6节效度数据的推广，1。第一节总结，1 .效度的含义，效度与信度的关系，3 .有效性类型，返回，2。1.有效性的含义。有效性是指测试的有效性，也就是说，测试分数可以代表要测试的测试。对测试衡量要测试的特性的程度的估计。AERA，美国心理学协会，NCME(1999，p12)指的是那些事实和理论的有效性，是根据特定的目的支持分数来解释的。3，效度的数学定义，测验分数=有效分数系统误差随机误差测验分数方差=有效分数方差系统误差方差效度是有效分数方差与测验分数方差的比值，返回，4，2，效度与信度的关

2、系，高信度是高效度的必要条件，但不是充分条件，5， 有效性不会大于可靠性的平方根(可从下面的公式中推导出来)，返回，6，3，有效性的类型，与有效性结构相关的内容有效性标准，返回，7，第2节，内容有效性，1，内容有效性的含义，2，检验测试内容有效性的程序，3，确定内容有效性的方法，4，应用范围，5，表面有效性，返回，8，1，内容有效性的含义，内容有效性。 测试的用户想要评估候选人在它所代表的整个环境中的表现。(1974)内容相关证据(1985)基于测试内容的证据(1999) (p299)，返回，9。第二，检验考试内容有效性的一般程序，以教育考试为例，确定所有要测量的内容范围；将测试目标具体化为不

3、同层次的测试目标；确定各测试目标在整个测试中的比例；准备双向分解；确定每个隔间的试题数量；按比例随机选择试题；请专家分析试题的代表性和适用性，并进行必要的修改，直到大多数专家满意为止。返回，10，双向分解示例，前一页，11，3，内容有效性的确定，专家判断方法(如上所述)，重复方法处理后的复试方法的内容有效性比率，12，重复方法，一组受试者在两份测试副本上从相同的内容范围内进行评估。如果相关性较低，则两个测试中至少有一个缺乏内容有效性。如果相关性高，一般推理测验具有内容效度，但两个测验可能有相同的偏差。13、重测法处理后，教学或训练前的前测和后测，先测试某一项测试，然后在教学中训练它们，最后再测

4、试一次。如果成绩有很大提高，说明该测试对教学有很高的内容效度。14，内容效度比率，返回，15，4，适用范围，内容效度适用于待测内容可以整体明确界定的情况：标准参照测验，知识测验，技能测验和其他可以通过教育测验的工作表现来界定的专业心理测验都不适合：智力测验，人格测验，返回，16，5，面子效度，面子效度主观上认为测验是否衡量了待测内容不是真正的效度。面孔效度影响被试的考试动机。人格测验要求面孔效度不要太高。返回，17，第3节：标准相关的有效性；1.标准相关有效性概述；2.与标准相关的有效性；4.标准相关效度的应用；18.与标准相关的有效性概述是指测试分数和外部标准之间的相关性。也称为标准相关有效

5、性。有效性的标准就是有效性的标准。指独立于测试结果并反映测试目的的行为参考。，19、研究准则相关效度的一般步骤，以确定一个合适的准则行为及其测量方法；确定能够代表测试最终用户的合适受试者样本；测量并记录每个科目的分数；获取标准数据，并在标准上测量每个主体的操作；确定测试分数和标准分数之间的相关程度。20，标准相关效度的类型，预测效度的测试分数和随后获得的标准分数之间的相关性。同时效度检验的分数与标准分数之间的相关性几乎是同时获得的。return，21，2，criteria，常用于衡量标准的标准，22，1衡量标准，有效性：高效率，可靠性，高可靠性，客观性：标准污染：在衡量标准的过程中，事先了解预

6、测源的结果会影响或污染衡量标准，这是方便的，经济的和实用的。2常用标准，学业成绩(智力测验、标准化成绩测验)、实际工作表现(特殊能力测验、部分智力测验和人格测验)、群体差异(测验成绩能区分已知的群体差异)、临床诊断(人格测验)、特殊训练结果(特殊能力测验)、等级评定(人格测验)、已有测验、回报24三、标准的相关效度估计方法、相关系数法、分组测验法、命中率法、工作利率法、回报25，1相关系数法、方法：积差相关、点两列相关、两列相关、等级相关和回归方程可用于预测有效标准分数。缺点：当预测源和准则为非线性时，有效性会被低估；无法提供权衡正确性的指标。26，积矩相关，适用条件：测验分数和分数都是正态连

7、续变量，并且它们之间存在线性关系，27，积距相关公式，例如，28，两列相关，适用条件：两列变量都是来自正态分布总体的等距变量，其中一个被人为地分为两类，29，两列相关公式，例如，返回，30，步骤：根据受试者的行为将他们分成组，在标准上：测验分数的成功与失败或合格与不合格之间的差异是独立的t检验用于计算重叠。31.独立样本T检验公式，例如，32。计算重叠。当样本组大小n较大时，均值之间的标准误差将较小。如果在t检验中有显著差异，有必要找出两个分布之间的重叠。33岁。计算重叠。方法1: A1=失败组中高于成功组平均测试分数的人数A2=成功组中高于成功组平均测试分数的人数比例越低，两组之间的差异越大

8、。方法2:计算两组得分分布的公共区域的人的百分比，即两组得分分布的交叉区域。公共区域的百分比越小，两组之间的差异就越显著。例如，收益率，34，3命中率方法，分类决策的正确性，例如，收益率，35，4工作率方法，有效性的实用性U=B(NS)C(NU)S U=工作率B=通过雇用一个成功的人所产生的平均利润NS=成功的雇员的数量C=雇用一个不合格的人所造成的损失NU=失败的雇员的数量第三，与标准相关的有效性的应用，个人分数预测器的分类和放置，37，1个人分数的预测， 简单线性回归：将线性回归方程转化为用标准分数表示的ZY=RZX方程，38，预测误差，有效性系数的平方表示由检验分数可以解释的标准所测量的

9、方差的比例。 预测误差的标准误差为39。例如，智力测验和数学成绩的相关系数为0.60，数学成绩的标准差为7.0。如果用智力测验的结果来预测数学成绩，预测误差的标准差是多少？40、2人员的分类和安置应根据受试者对有效性标准的预测结果进行处理或安排。选择：拒绝或接受安置：根据受试者对单一标准的预测结果进行治疗或安排。分类：使用两个或更多有效的标准。返回，41，第4节，结构有效性，1。结构有效性的含义，2 .确定结构有效性的基本步骤，3。收集结构有效性数据和返回的方法，42。1.结构效度的含义，指的是测试分数衡量或解释理论观点的程度。构式效度的翻译，构式效度，回归，43，2，确定构式效度的基本步骤，

10、1建立理论框架，2提出假设，3检验假设，回归，44，3，收集构式效度数据的方法，1内部测试法，2内部测试法，3标准相关法，4实验操作法，5发展水平的变化，45，1内部测试法，确定测试的内容效度，分析受试者对项目的反应过程，调查测试的同质性， 46，2互测法，相容性效度，计算新旧相似考试成绩之间的相关效度，计算不同结构考试之间的相关因子效度，通过因子分析找出影响考试成绩的共同因素。 每个测试的公共因子上的负载是每个测试和公共因子之间的相关性，这被称为测试的因子有效性，47。验证智力测验效度的常用方法是相容性效度法，即找出测验结果与标准化测验结果之间的相关性，即找出测验结果与学生学业成绩和教师评价

11、之间的相关发展水平的变化，即整体测验成绩和各项目的通过率是否随着年龄的增长而增加项目效度，即计算项目成绩与测验总分之间的相关内部一致性系数，即检验测验的同质性，48。各种效度分析方法的比较，49。最低标准：有效系数有统计学意义；测试的有效性高于现有的决策工具。如果两个测试测量相同的心理属性或特质，那么标准的相关系数应该在0.60以上。如果两个测试所测量的心理属性或特征不完全相同，而只是有一定的相似性，那么有效性标准的相关系数要求会较低，最好达到0.40以上。比如智力测试结果和学业成绩之间的相关性。返回，50，第5节提高测量有效性的方法，1。影响有效性的因素2。提高测量有效性的方法，返回，51。

12、影响效度的因素、测验本身的项目质量、项目数量测验的实施、测验实施的标准化、受试者的身心状态、样本表征和异质性标准测量的信度、测验成绩与测验成绩的关系。测量的高可靠性是高有效性的必要条件。返回，52，2。方法提高测量效度，细化测试量表，避免较大的系统误差，合理组织测试，控制随机误差，创设标准测试情境，使每个受试者都能发挥正常水平，增加样本量，提高代表性，选择正确的有效标准，正确测量有效标准，正确使用相关公式。返回，53，测试的有效性和可靠性与具体情况有关，只与具体情况的有效性有关，而与测试的总体有效性无关。效度生成是指在一种情境下进行的效度研究延伸到其他情境的过程。，54，1。效度泛化的几个方面，1 .通过使用同一个测试的不同副本来概括预测器是否同样有效？同一个测试对预测不同分数水平的人同样有效吗？2.有效性标准的泛化采用不同的类型或不同的时间间隔。这个测试同样有效吗？不同的分数水平对目标的预测是否一样好？3.测试情况的概括。不同的测试人员，不同的测试条件，以及不同的指令或心脏下的测试是否同样有效？55，4组的综合测试对从同一人群中抽取的另一个样本是否同样有效？该测试对不同性别、年龄、教育水平、社会经济地位、地区、民族、学校和职业的受试者同样有效吗？5.建立有效