测验的项目分析PPT课件

.,1,第五章测验的项目分析,本章学习目标：1、理解项目难度与区分度的概念。2、能够解释难度与区分度之间的关系。3、掌握项目难度和区分度的计算方法。4、能够进行项目难度的猜测校正。,.,2,项目分析的内涵,项目分析是预测中的一个重要环节，它包括质的评价和量的分析。质的评价：评价题目的“命中程度”与“语言表述”。采用项目评估量表的形式，请心理学研究生、专家或被试等进行评估。经评估、修改后形成“预测问卷”。量的分析：采用统计方法分析“预测问卷”题目的难度和区分度。删除或修改那些难度或区分度不合要求的项目，对测验进行有针对性的改进。,.,3,第一节项目的难度,一、难度的含义难度指测验项目的难易程度。一个测验项目，如果大部分被试都能答对，该项目的难度就小；如果大部分被试都不能答对，则该项目的难度就大。难度过大或过小的题目，都不能很好地将不同水平的被试区分开来，因此对常模参照测验的价值就不大。,.,4,二、难度的计算方法,1、当项目以0、1计分时，难度等于通过率（不考虑猜测机率）。2、当项目以1、0计分而人数较多时，难度等于总分上高分组与低分组通过率的平均数（参见P73例题）,.,5,练习题,例题1：80名学生参加了某个测验，答对第3道选择题的有64人，请问该题目的难度是多大？例题2：100个学生参加了某测验，其中某选择题的答题情况如下表所示，计算该题目的难度。,.,6,高分组和低分组的确定方法是：将被试按照测验分数从高到低排列，取总分最高的27%为高分组，取总分最低的27%为低分组。注意：标准化测验一般采用27%为分组点。也可以取总人数的1/4或1/3（即25%或33%）为分组点。当样本小于100时，一般选50%作为分界点。3、当项目是多重计分时，难度等于平均分与满分之比。,.,7,P值的范围在0-1之间。P值越大，题目越容易；P值越小，题目越难。P值与我们通常理解的难度意义正好相反，也有人将它称为容易度。,.,8,三、项目难度的讨论,仅仅凭借P值，还不足以判断是否保留或删除一个项目。项目难度的适当性标准取决于测验的性质和功能：对于一般性测验而言，项目难度的一般标准应在0.3-0.7之间；对于成就或学绩测验，则不必过多考虑项目难度。只要是必须掌握的内容，都可以作为考试项目，其难度可以从0-1之间变动。平均难度在0.50左右。对于选拔性、竞赛性考试，其项目难度应接近录取率。如果录取率高则难度应该低一些，录取率低则难度应该高一些。,.,9,四、难度的等距转换,P值本质上是正确答题的人数百分比，是一种顺序量表。对于一般的难度分析而言，只要计算出P值即可。如果需要对P值做进一步的统计分析（如加减运算、求平均数、做显著性检验等），则要将P值转化为等距量表性质的标准Z分数或值，使之具有相等的单位。,.,10,Z值,Z是均值为0、标准差为1的标准分数。通过查阅正态分布表，可以从P值查到Z值。Z值越大，题目越难；Z值越小，题目越容易。这一点与P值的含义相反。,.,11,值,值是对Z值的线性转化，平均数为13，标准差为4。=13+4Z（在1与25之间变动）注意：值越大，难度越大；值越小，难度越小。这一点与P值的含义相反。,.,12,五、项目难度对测验的影响,1、项目难度影响测验的编排一般根据试题的难度，按照由易到难的顺序编排。2、项目难度影响测验分数的分布形态整个测验的难度适当，测验的分数接近正态分布；测验的难度偏大，则大多数被试集中在低分端，“正偏态分布”；测验过于容易，则大多数被试集中在高分端，“负偏态分布”。,.,13,.,14,3、项目难度影响测验分数的离散程度题目难度在0.50左右时，分数分布的离散程度最大。难度过大或过小，分数分布的离散程度变小。4、项目难度影响测验信度当测验难度的平均值在0.50左右时，分数的分布范围最广，以相关系数为基础的信度也变得相对较高。5、项目难度影响区分度,.,15,.,16,第二节项目的区分度,一、区分度的含义区分度指测验项目对被试心理品质水平差异的区分能力。区分度良好的项目，能够将高水平与低水平的被试区分开来。即高水平个体在该项目上得分高，低水平被试在该项目上得分低。项目分析中，一般采用被试的测验总分作为判断其水平的效标分数，内部效标。也可以采取外部效标。,.,17,区分度一般用D表示。D值在-11之间变动。区分度的大小，常常能够决定是否删除或保留一个项目，它可以作为筛选项目的一个主要指标。,.,18,二、区分度计算,项目区分度可以有不同的计算方法，我们要根据测验的目的以及测验分数的特征来选择合适的方法。1、鉴别指数法（适合0、1计分）一个项目的鉴别指数指总分高分组与低分组在该项目上的通过率之差。D=PHPL,.,19,例题1：,.,20,鉴别指数的含义,D为1时，表明高分组被试全部通过，而低分组被试全部失败；D为-1时，含义相反；D为0时，表明高分组和低分组通过率一样。作为鉴别指数的D值的含义，是高分组比低分组通过率高出的百分比程度。,.,21,鉴别指数的一般标准：,.,22,2、相关法,鉴别指数只考虑了高分组和低分组的情况，浪费了测验中的许多信息，统计结果的精确度与分析全体被试的数据要差一些。在大规模或标准化的测验中，大多采用相关法来计算项目区分度。可以有两种计算途径：其一，计算项目得分与测验总分的相关系数；其二，计算项目得分与外部效标的相关系数。对相关系数进行显著性检验。,.,23,数据性质与计算相关系数的方法,.,24,三、区分度与难度的关系,.,25,0.2,0,0.4,0.6,0.8,1.0,P值,1.0,0.8,0.6,0.4,0.2,D的最大值,.,26,当难度为0.50时，该项目的潜在鉴别指数D最大，而难度分布在两端（0或1）时，潜在的鉴别指数D最小。常模测验中要求项目难度保持在中等水平，可以最大程度地区分被试的水平差异。,.,27,是不是测验中所有项目的难度都要控制在0.50左右呢?实际编制测验时，最好使项目的难度分布广一些，梯度大一些，容易：中等难度：难=3：5：2，使整个测验的难度呈正态分布，且平均难度保持在0.50左右。,.,28,四、区分度的相对性,1、不同计算方法得到的区分度指标不同。鉴别指数法和相关法求出的区分度含义不同，所得数值也不相同。2、样本容量大小影响相关法区分度的大小。样本容量越小，用相关法计算出来的相关系数越不可靠。样本容量越大，相关系数越可靠。,.,29,3、分组标准影响鉴别指数。25%、27%、33%、50%，分组越极端，D值越大。4、被试团体的性质影响区分度大小。项目的区分度是针对不同被试而言的。比如同一份测量试卷，让自考学生和全日制心理系大学生做，项目的区分度会有很大不同。,.,30,.,31,一、填空题1、测验结果跨时间上的稳定性体现的是（）信度。2、如果一个测验的信度值接近1，则该测量的标准误接近于（）。3、在测量理论中，效度定义的数学表达式（）。4、区分度的取值范围为（）。,.,32,5、如果某个题目的通过率是0.5，那么该题目的鉴别度指数D的最大值可能是（）。6、在370名被试中，选为高分组和低分组的被试各为100人，其中高分组有80人答对第2题，低分组有40人答对第2题，则第2题的难度为（）。7、如果某测验的原始分数服从正态分布，转化个为T分数后，会有（）人在60分以下。,.,33,填空题答案,1、重测信度；2、0；3、4、-11；5、1；6、0.60；7、84%,.,34,.,35,伊索寓言新编：“六只狐狸与葡萄的故事”,酸的大骂得癌跳累死上吊精神分裂,.,36,微软招聘智力测试题(3分钟),test1:烧一根不均匀的绳需用一个小时，如何用它来判断半个小时？test2:请仅用一笔画四根直线，将上图9各点全部连接。,.,37,外企招聘性格测试题,1.你何时感觉最好？a）早晨b）下午及傍晚c）夜里2.你走路时是a）大步的快走b）小步的快走c）不快，仰著头面对著世界d）不快，低著头e）很慢,.,38,3.和人说话时，你a）手臂交叠的站著b）双手紧握著c）一只手或两手放在臀部d）碰著或推著与你说话的人e）玩著你的耳朵、摸著你的下巴、或用手整理头发4.坐著休息时，你的a）两膝盖并拢b）两腿交叉c）两腿伸直d）一腿卷在身下,.,39,5.碰到你感到发笑的事时，你的反应是a）一个欣赏的大笑b）笑著，但不大声c）轻声的咯咯地笑d）羞怯的微笑6.当你去一个派对或社交场合时，你a）很大声地入场以引起注意b）安静地入场，找你认识的人c）非常安静地入场，尽量保持不被注意,.,40,7.当你非常专心工作时，有人打断你，你会a）欢迎他b）感到非常恼怒c）在上两极端之间8.下列颜色中，你最喜欢哪一颜色？a）红或橘色b）黑色c）黄或浅蓝色d）绿色e）深蓝或紫色f）白色g）棕或灰色,.,41,9.临入睡的前几分钟，你在床上的姿势是a）仰躺，伸直b）俯躺，伸直c）侧躺，微卷d）头睡在一手臂上e）被盖过头10.你经常梦到你在a）落下b）打架或挣扎c）找东西或人d）飞或漂浮e）你平常不做梦f）你的梦都是愉快的,.,42,评分方法,1.（a）2（b）4（c）62.（a）6（b）4（c）7（d）2（e）13.（a）4（b）2（c）5（d）7（e）64.（a）4（b）6（c）2（d）15.（a）6（b）4（c）3（d）5,.,43,6.（a）6（b）4（c）27.（a）6（b）2（c）48.（a）6（b）7（c）5（d）4（e）3（f）2（g）19.（a）7（b）6（c）4（d）2（e）110.（a）4（b）2（c）3（d）5（e）6（f）1,.,44,分数解释,低於21分：内向的悲观者人们认为你是一个害羞的、神经质的、优柔寡断的，是须人照顾、永远要别人为你做决定、不想与任何事或任何人有关。他们认为你是一个杞人忧天者，一个永远看到不存在的问题人。有些人认为你令人乏味，只有那些深知你的人知道你不是这样的人。,.,45,21分到30分：缺乏信心的挑剔者你的朋友认为你勤勉刻苦、很挑剔。他们认为你是一个谨慎的、十分小心的人，一个缓慢而稳定辛勤工作的人。如果你做任何冲动的事或无准备的事，你会令他们大吃一惊。他们认为你会从各个角度仔细地检查一切之后仍经常决定不做。他们认为对你的这种反应一部分是因为你的小心的天性所引起的。,.,46,31分到40分：以牙还牙的自我保护者别人认为你是一个明智、谨慎、注重实效的人。也认为你是一个伶俐、有天赋有才干且谦的人。你不会很快、很容易和人成为朋友，但是是一个对朋友非常忠诚的人，同时要求朋友对你也有忠诚的回报。那些真正有机会了解你的人会知道要动摇你对朋友的信任是很难的，但相等的，一旦这信任被破坏，会使你很难熬过。,.,47,41分到50分：平衡的中道别人认为你是一个新鲜的、有活力的、有魅力的、好玩的、讲究实际的、而永远有趣的人；一个经常是群众注意力的焦点，但是你是一个足够平衡的人，不至於因此而昏了头。他们也认为你亲切、和蔼、体贴、能谅解人；一个永远会使人高兴起来并会帮助别人的人。,.,48,51分到60分：吸引人的冒险家别人认为你是一个令人兴奋的、高度活泼的、相当易冲动的个性；你是一个天生的领袖、一个做决定会很快的人，虽然你的决定不总是