心理测量2-心理测验的编制

2.第二章,心理测验的编制,本章主要内容：,2.1编制测验的一般程序2.2测验项目的分析,2.1编制测验的一般程序,编制好的测验是实现心理测量的基本前提。不同性质、用途的心理测验，其编制的具体技术、过程和方法有所不同，但基本程序是一致的。一般要经过以下几个步骤：,（1）确定测验目的。（2）拟定编制计划。（3）设计测验项目。（4）项目的试测与分析。（5）合成测验。（6）测验使用的标准化。（7）鉴定测验搜集信度和效度资料。（8）编写测验手册说明书。,摘自(美)麦坚特&米勒著心理测量p.304（轻工2009版）,2.1.1确定测验目的在编制测验之前，必须明确测量的对象、目标和用途。明确测量的对象明确测量的对象也就是要明确测验编成后用于测量什么样的个人或团体，即受测者的年龄、性别、职业、受教育程度、文化背景、民族等。（涉及确定测验类型：纸笔或口头、群体或个体）,明确测量的目标明确测量的目标也就是要明确该测验要测量什么，是测能力、人格还是学业成就。此外，还需把目标具体化转换成可操作的定义。如智力的具体指标P.14如大学适应量表所测量的构想,明确测验的用途明确所编的测验是用于描述受测者的心理特质，还是用于诊断心理是否异常，抑或是选拔人员和预测。用途不同编制测验时的取材范围及测题难度也不尽相同。（常模参照抑或标准参照）,2.1.2拟定编制计划编题计划即编制测验的总体构思。主要确定测验内容（测验内容应全面而具代表性，不致使测题偏离应测范围）和对各个内容点的相对重视程度。（常用百分比标明p.16表2-1）,2.1.3设计测验项目,搜集有关资料。（1）资料要丰富，资料搜集齐全，这样测验内容便不致于有偏颇，而且能提高行为样本的代表性。（2）资料要有普遍性。所选择的材料对测验对象要尽可能公平，即被试都有相等的学习机会。,选择项目形式P.17确定测验项目以什么形式呈现给受测者。测验项目的呈现形式取决于受测者的年龄、人数、测量的目的、测验项目的性质等因素。编写和修订测验项目编写测验项目时要注意几个问题：（1）测验项目的取样应对欲测的目标具有代表性；,（2）测验项目的取材范围要同编题计划所列项目范围相一致；（3）项目的难度必须符合测验目的的需要，如果是能力测验或成就测验，就应当包括各种不同难度的测验项目，以鉴别各种不同能力或不同知识水平的人员；（4）初编题目的数量要比最终所需的题数多一倍至几倍，以备筛选和编制复本；（5）测验项目的说明必须简明。,2.1.4项目的试测和分析,初选的项目虽然在内容和形式上符合要求，但是否具有适当的难度和区分度，必须通过试测，并进行测验项目分析，以便进一步修改。,项目的试测测验项目的优劣应经过实际的试测来检验。在试测时应注意：（1）试测对象应取自将来正式测验准备施测的群体；（2）试测的情境应力求同正式测验的情境一致；（3）试测的时限可稍宽些，最好使每个被试都能做完；,（4）施测者应对受测者的反应加以记录。如在同一时限内，一般被试所完成的题数、题意不清之处等，以便修改项目时参考。,项目分析（详见2.2）试测完成后，可以根据试测结果进行项目分析。项目分析主要确定测题的难度、区分度、备选答案的合适度等数量指标。依分析结果取舍项目。由于试测的样本小可能会存在取样误差，由此获得的项目分析结果未必完全可靠，需对来自同一总体的两个样本施测，然后分别进行项目分析，看两次分析结果是否一致（复核）。若相差较大，说明该项目的性能值得怀疑。,2.1.4.2项目分析,2.1.5合成测验合成测验就是把经过试测后通过项目分析证明性能优良的项目选出，加以适当编排，组合成测验。即要解决两个问题：项目选择和项目编排。,项目的选择应选择那些能够测量所要测量的东西的项目，项目的区分度要高，难度合适。不同性质的测验对难度要求不同，选拔性测验要求难度大些，人格测验则不要求难度。,项目编排对整个测验项目的编排按由易到难的顺序。测验开头应有一、两个较容易的题目，被试易于做答，解除紧张情绪，建立信心，较快进入测验情境。在测验最后可有少数难度较大的题目，以测受试者的最高水平。,具体编排常见有两种方式：并列直进式和混合螺旋式。（1）并列直进式是将整个测验按项目内容或形式分为若干分测验，每一分测验按难度从易到难排列。（2）混合螺旋式是将各种类型的测题依难度分成若干不同的层次，再将同等难度水平中不同性质和类型的题目组合在一起，作交叉式排列，难度渐次上升。其优点是可使被试对各类测题循环作答，从而维持兴趣。,编制复本为增加实际的效用，有时一个测验需有等值的复本。复本的编制要符合下列条件：（1）测量的是同一种心理特质；（2）测题的内容和形式相同，但不应有重复；（3）题型相同、数量相等并有大体相同的难度和区分度。,可先将所有题目按难度排列，标上序号，然后依序按“蛇型”将各题安排至各复本中（P.21）。复本编好后，应再测验一次，以确定各份测验是否等值。,2.1.5.3编制复本,2.1.6测验的标准化测验的好坏取决于测验的标准化水平，所谓标准化是指测验的编制、实施、评分以及分数解释的程度的一致性。,施测过程的标准化p.22（1）指导语指导语内容通常包括对测验目的的说明和被试如何作出反应的指示和时限等。（2）时限不同的测验对测验时限要求不同。如人格测验可不必规定严格的时限。但能力测验和学绩测验必须考虑时限问题。确定时限一般采用尝试法。通过依次来决定。通常的时限定为大约90%的受测者能完成全部测验项目的时间。,评分、记分的标准化即两个或两个以上的评分者对同一份测验评定是一致的。一般来说，不同评分者之间的一致性达90%，便可认为是客观的。分数解释的标准化测验分数必须与某种参照系统（常模或某种标准）作比较才有意义。,测验编好后，必须对其可靠性和有效性进行鉴定，以便确定测验是否可用，对测验的鉴定主要是确定其信度和效度指标。（详见第三章）,2.1.8编写测验手册测验手册是向测验使用者说明如何正确使用该测验。手册内容应包括测验的目的和功用、理论依据、测验内容、施测方法、时限、标准答案、评分标准、信度和效度资料、常模表等等。,2.2测验项目的分析,对测验项目的分析，主要是对项目难度和区分度等指标进行分析。可帮助我们筛选和修订项目，提高测验的可靠性和有效性。2.2.1测验项目的难度指标难度指测验项目的难易程度。通过者多，难度小。通过者少，难度大。测验的记分方法不同，项目难度的计算方法有所不同。,二分法记分项目-难度的计算（1）对于二分法记分的项目，如是非题、选择题等，其难度通常用通过率（P）来表示。即用答对该题人数的百分比作为指标。P值越大其难度越小。P=R/N（2-1）P-通过率，R-答对人数，N-总人数,（2）当被试人数较多时，可用极端分组法计算P值。先将被试按测验总分从高到低排列，然后将总分最高的27%的被试定为高分组，总分最低的27%的被试定为低分组。然后分别计算两组在某一项目上的通过率，用下列公式计算难度P：P=(PH+PL)/2（2-2）PH-高分组的通过率PL-低分组的通过率,2.2.1.1二分法记分项目（2）,例：在370名被试中，高分组和低分组被试各人，其中高分组有70人答对第一题，低分组有40人答对第一题，则第一题的难度指标P为：PH=70/100=0.7PL=40/100=0.4P=（PH+PL）/2=（0.7+0.4）/2=0.55,（3）在选择题中，猜测的成功率受项目备选答案数目的影响。备选答案数目越少，机遇的作用越大。为平衡机遇对难度的影响，需用下列公式进行校正：CP=(KP-1)/(K-1)（2-3）CP-校正后的通过率P-实际通过率K-备选答案数目,例：有A、B两个测题，A为四项选择题、通过率PA0.58；B为五项选择题，通过率PB0.56；试比较两题的难度。A题更易，B题更难。再用校正公式计算校正后的通过率CP。CPA，CPB。CPA0.44，CPB0.45结论正好相反。,非二分法记分项目-难度的计算非二分法记分的项目，如论述题、简答题等。每个项目是从满分到零分之间多种可能结果。其难度指标P的计算公式为：,例：某测验第7题满分15分，该题考生平均得分9.6分，则难度P=,P=9.615=0.64测验项目的难度水平定在什么水平合适，取决于测验的目的、性质和项目形式。如果测验的目的是为了了解被试在某方面知识技能的掌握情况，可以不必过多地考虑难度，只要教育者认为重要的内容就可以选用。如果测验的目的是用于选拔录用人员，就应选用那些难度接近录取率的项目。,大多数测验希望较准确地测量个体间的差异，如果项目太难或太容易，被试全错或全对，就无法提供个体差异的信息。为了使测验具有较好的区分能力，一般选择接近中等难度的项目为好。,2.2.2测验项目的区分度指标项目的区分度：测验项目对被试特性的区分能力。具有良好区分度的项目，能将不同水平的被试区分开来。区分度的取值范围-1至+1之间。正值为积极区分，零为无区分作用，负值为消极区分。区分度的计算方法有多种：,鉴别指数法按测验总分高低将被试排队，从高分端和低分端各取27%的被试作为高分组和低分组。计算各项目上高分组和低分组的通过率(P)，二者之差就是鉴别指数（D）。D=PHPL(2-5)D值是鉴别项目测量有效性的指标，D值越高，项目越有效。一般认为，D=0.40以上，项目评价很好。D=0.19以下，项目评价差，要淘汰。（p.30表2-2）(这种方法较适合于二分法记分的项目),相关法用鉴别指数分析项目区分度虽然易于理解，计算方便，但结果不精确。在大规模的或标准化的测验中，多采用相关法，即以某一项目分数与测验总分或效标分数的相关作为项目区分度的指标。相关越高，区分度就越高。（1）二列相关二列相关适用于两列连续变量，但其中一个变量被人为分成两类：及格和不及格、通过和未通过等。,其计算公式为：（P.30）,(2-6),或,(2-7),-为二列相关系数。一般来说，其值越高，项目的区分度越高(需经统计检验)。,-为二分变量通过组对应的连续变量的平均数。,-为二分变量未通过组对应的连续变量的平均数。,-为连续变量的平均数。,p-为通过组人数与总人数之比。q-为未通过组人数与总人数之比。y-为p与q交界处正态曲线的高度(查表)。,-为连续变量的标准差，,（2）点二列相关点二列相关适用于项目是用二分法记分（如选择题），而测验总分或效标分数是连续变量的。其计算公式为：（P.31）,(2-8),符号意义与公式2-6、2-7同。,对二列相关、点二列相关计算出的相关值需进行显著性检验，才能确定其意义。二列相关用下面的公式加以检验:P.31,(2-10),N为总人数，其它符号意义与上同。若Z值大于1.96，即为显著相关。例题1（例题p.31）,点二列相关可用查积差相关系数的方法进行检验，也可用t检验。若未达到显著性水平，该项目的鉴别力就值得怀疑。,2.2.3区分度与难度的关系,难度与区分度有着密切的关系。项目的难度对项目的区分度有一定影响，难度越接近0.5，项目潜在的区分度越大。而越接近0或1，项目潜在的区分度越小。呈倒V型关系。（P.33图2-3）从理论上说，测验的所有项目难度都保持在0.5水平最理想。但在实际编制测验时，却不能要求所有项目的难度均为0.5。在选择项目时，应使项目的难度分布广一些，使整个测验的难度分布呈正态分布，并使难度的平均水平保持在0.5左右。,2.2.4项目分析的特殊问题,选择题反应模式的分析P.34选择题因能较有效地控制随机猜测导致的测量误差，且易于评分、能用计算机阅卷，在教育与心理测验中，有极其广泛的应用。选择题项目的分析，除了要分析其难度和区分度外，还要分析被试对每个备选答案的反应情况。可先将被试按测验总分从高到低排列，定出高分组（总分在前27%的被试）和低分组（总分在后27%的被试），然后从以下几个方面进行分析：,（1）如果正确备选答案被所有被试所选择，说明题目太容易或题中可能提供了某种暗示。（2）如果某个错误备选答案没有一个被试选择，说明该选项不具迷惑性，错得过于明显。一般来说，除非有2%以上的人选择，否则该备选答案应修改或删除。（3）如果所有被试都选择了同一个错误选项，可能是编制测验时把错误答案搞错了，也可能是在教学中发生了错误。,（4）如果高分组和低分组被试的选择集中在两个答案上，二者选择率相近，说明该题可能本来就有两个正确答案或另一个答案也有一定道理。（5）如果高分组对正确答案的选择率与低分组相等或更低，说明该题不具有鉴别力，应删除或修改。（6）如果一个题目未作答的人数较多或选择各个备选答案的人数相等，说明该题可能过难或题意不清，被试无法作答或凭猜测作答。例2,标准参照测验的项目分析P.34常模参照测验描述被试在团体中的相对位置，提供个体在所测量的某种心理特征方面的差异。但有些测验目的在于了解个体在测验内容上掌握的绝对水平而不是个体间的差异。这时需要采用另一种类型的测验即标准参照测验。它主要用于判断被试是否掌握了某些知识技能。是否达到了一个事先确定的标准。测验结果只与既定标准比较，而不在被试之间作比较。,标准参照测验的项目分析方法：（1）测验项目的难度分析,难度一般以通过率来表示。标准参照测验的项目难度分析并不重要，在大多数情况下只是作为项目区分度分析的基础。标准参照测验的目的是为了考察被试对某方面知识技能的掌握程度，只要能反映教育目标或教育者认为重要的内容，无论项目是难是易，均可以编入测验。（2）测验项目的区分度分析标准参照测验的项目区分度分析一般有3种方法.,（2）测验项目的区分度分析,第一种方法：先根据被试的测验总分是否达到某一标准把被试分成两组：达标组和未达标组，然后分别计算两组被试在某一项目上的通过率，二者之差即为该项目的区分度D。,Ps、Pn-为达标组与未达标组在某一项目上的通过率。该方法存在的问题是：分组标准不同，区分度值不同。,(2-11),（2）测验项目的区分度分析（2）,第二种方法：用该测验对同一组被试在教学前后各测一次，分别计算各项目在前后测的通过率，二者之差即项目的区分度D。,Ppost-为项目在后测的通过率Ppre-为项目在前测的通过率该方法存在的问题是：同一测验前后施测两次可能会存在练习效应，成绩提高很难确定是教学还是练习的影响。,(2-12),（2）测验项目的区分度分析（3）,第三种方法：选择两组被试，一组接受过同测验有关学科的教学，另一组没有接受过此类教学。两组施测同一测验。然后分别计算两组被试在某一项目上的通过率，二者之差即为该项目的区分度D。,Pi、Pu分别为教学组与未教学组在某一项目上的通过率。此法要求教学组与未教学组为同质等组。,(2-13),小测验,测验项目的分析，主要是对项目的什么指标进行分析？其目的何在？难度和区分度等指标。可帮助我们筛选和修订项目，提高测验的可靠性和有效性。何谓“极端分组法”？将被试按测验总分从高到低排列，然后将总分最高的27%的被试定为高分组，总分最低的27%的被试定为低分组。,小测验,“项目的区分度”指的是什么？项目的区分度指测验项目对被试特性的区分能力。具有良好区分度的项目，能将不同水平的被试区分开来。,区分度的计算方法有几种？鉴别指数法先计算各项目上高分组和低分组的通过率(P)，二者之差就是项目的鉴别指数（D）。D值越，项目越有效。相关法是以某一项目分数与或的相关作为项目区分度的指标。相关越高，区分度就越。,难度与区分度有着密切的关系。对不对？难度与区分度呈关系。项目的难度对项目的区分度有一定影响，难度越接近0.5，项目潜在的区分度。而越接近0或1，项目潜在的区分度。,大学适应量表所测量的构想,焦虑定义：对临床的焦虑的测量关注的是一般的情感、认知和生理症状。行为：高度的焦虑表现为肌肉紧张、高度警觉和对环境的审视，快且浅的呼吸，经常由于对真实的或预期的生活事件的过度考虑和担心而出现一些干扰性的或多余的想法。