心理测验03测验的编制.ppt

第三讲 测验的编制,回顾,了解个别差异，诊断、预测、评价甄选、分类和安置，为心理辅导和心理咨询、心理和教育科研服务 社会影响 分数上的差异是否反映真实的能力差异 能力差异是否足够的重要 测验是否帮助或伤害了少数人 我们是否应该强调平等或效能？ 侵犯隐私 机密性、知情同意,一、编制测验的一般程序,确定测验的目的 制定编题计划 编辑项目或题目 项目的试测和分析 合成测验 将测验标准化 对测验的鉴定 编写测验说明书,1. 确定测验的目的,测量对象 被试的年龄、智力水平、文化背景 测量目的 现实性测验 预测性测验 测量目标 界定测量目标 目标分析：任务分析、内容分析 寻找效标,2. 制定编题计划,双向细目表 B.S.Bloom的教育目标分类 认知领域 情感领域（&D K Krathwohl, 1964） 接受、反应、赋予价值、组织、形成品格 动作技能领域（RS Kibler，SW Baker等，1970） 身体运动、精细的协调动作、非语言交流动作、语言,3.编辑项目或题目,搜索有关资料 丰富 普遍性 选择项目形式 测验的目的和材料的性质 接受测验的团体的特点 各种实际因素 编写和修订题目,编写项目要注意以下几个问题： 项目的范围要与测验计划相一致； 项目的数量要比最后所需的数目多一倍至几倍，以备筛选和编制复本； 项目的难度必须符合测验目的的需要； 项目的说明必须清楚。,4. 项目的试测和分析,试测 对象 实施过程与情境 时限 被试的反应情形 项目分析 质的分析主要从内容和形式上,以及编制技术等. 量的分析主要是对预测结果进行统计分析. 复核 聚类分析,5.合成测验,项目的选择 1) 区分度高的题目 2) 难度适中的题目 3) 测验的长度适合被试 项目的编排 1) 并列直进 2) 混合螺旋式,编造复本 各份复本必须等值 甲 1. 4. 5. 8. 9. 12. 13. 16. 17. 20 乙 2. 3. 6. 7. 10. 11. 14. 15. 18. 19 甲 1. 6. 7.12.13.18.19.24 乙 2. 5. 8. 11. 14. 17. 20. 23 丙 3. 4. 9. 10. 15. 16. 21. 22,6. 将测验标准化,内容 施测 指导语 时限 评分 对反应及时和清楚的记录 记分键 将受测者的反应和记分键比较，对反应进行分类 常模,7.对测验的鉴定,信度 效度 量表和常模,8.编写测验说明书,本测验的目的和功用 编制测验的理论背景和选择题目的依据 测验的实施方法、时限及注意事项 测验的标准答案和评分方法 常模资料 测验的信度和效度资料,宋维真,第二部分 测验题目的编制技术,命题的一般原则 项目的种类和编制要领,命题的一般原则,试题要符合测验的目的 内容取样要有代表性 各个试题必须彼此独立 题目格式不要使被试发生误解 文句简明扼要 题目中不可含有暗示本题或其他题正确答案之线索,题目内容不要超出受测团体的知识与能力 所提问题应避免涉及社会禁忌与个人隐私 应有不致引起争论的确定答案(创造力测验、人格测验除外) 施测与评分省时,测题的种类和编制要领,自由应答型 填充题、简答题、应用题、论文题、联想题、操作题等 固定应答型 多选题、是非题、匹配题,1) 选择题,包括题干和选项两部分. 例: 美国的阿拉斯加是向哪个国家买来的? A.俄罗斯 B. 英国 C. 法国 D. 加拿大,1简单计算 小明给弟弟2枝铅笔，自己还剩8枝，小明原来有几枝铅笔? (A)4（B）6 (C)8 （D）10 2. 类比推理：已知甲和乙的关系，推出丙和丁的关系。 船水，飞机？： (A)大地 (B)白云 (C)天空 (D)海洋 3.找不同类：找出与其它几项不属于同类的一项： (A)狗 (B)鸟 (C)树 (D)鱼 4.最好理由: 偷东西的人应该受惩罚，因为： （A）惩罚可使他不敢再犯。 （B）偷窃为法律所不容。 (C)偷东西的人不是好人。 (D)偷窃扰乱社会治安。,选择题的优点： 单位时间内可以施测很多项目(一般每题不超过一分钟)，从而能保证取样的广泛性，使测验更有效。 评分客观，加上题目数量多，可以减少随机因素的影响，从而能保证测验的可靠性。 可以通过改变错误答案的迷惑性来调整题目的难度。 阅卷方便迅速，并可用机器评分，被试多时比较经济。 保密性好，好的题目可存入题库重复使用,选择题的缺点,有固定答案，测不出表达能力、组织材料的能力和创造力。 题量大，并要为每个题目考虑几个似是而非的答案，因而编写困难费时，需要一定技巧,选择题编制时的注意事项:,只有一个对的选项.错的不能太明显,以致没人选 例: 美国的首都是 A. 东京 B. 华盛顿 C. 太平洋 D. 1776 题目编排要有利于理解,选项不要夹在题干中间 战国初期,魏继承了A.秦,B.燕,C.齐,D.晋的旧业而最为富强,选项之间不应相互重叠,相互包括.如 9 3 = A. 大于5 B. 6 C. 小于7 D. 12 选项中有相同的词可以考虑放到题干里,以免显得累赘.如 孔子最伟大的成就在于: A.学术教育方面 B. 国防军事方面 C.艺术建筑方面 D.内政外交方面,选项要多,普遍采用4-5个; 各个选项在形式上应该协调一致. 所有选项在逻辑上和语法上都能与题干相接几个选项最好按逻辑顺序(如按量值大小、时间先后等)排列或随机排列，正确答案的位置要随机安排. 题干要尽量创设新的情境，文字要自己拟定，避免重复书本上的现成实例或措词 避免使用“以上皆是”,2) 是非题,每个题目只能包含一个重要概念; “纽约是美国的首都和第一大城市” 避免具有暗示性的字词; “所有智商高的学生学习成绩都很好。” “总是、决不、只有、经常、有时、通常” 尽量采用正面肯定的叙述，避免反面陈述或双重否定的文句。 “生物没有不是由细胞所构成的。”,题目的表述要简洁明确;不要有艰深难懂的词句或含糊不确定的文字叙述。 我国南方的天气很热。 对论点的陈述要重新组织，不要照搬教科书上的词句或仅仅加上否定词就构成错误项目。 “是”与“非”的测题数量大致相等，且长度、复杂性相当; 测题要有一定的数量.,3) 匹配题,这类题型有两部分组成,一部分是问句项目,另一部分是反应项目. 可以是完全匹配，也可以是不完全匹配 编写配合题的要领: A. 问句和反应项目在内容上要同质; B. 指导语中要讲清配合的依据;告诉被试各反应能用几次 C. 配对项目不能太多,最多不超过10项; D. 同一组题目要印在同一页上.,( )1、家 A、鲁迅 ( )2、子夜 B、郭沫若 ( )3、阿Q正传 C、矛盾 ( )4、骆驼样子 D、老舍 E、巴金,4) 填空题和简答题,第一个智力测验是由_与_编制的 一年有哪几个季节? 几个原则: A. 只能有一个答案 B. 不适宜测量零散琐碎的知识 C. 测量有重要意义的词类 D. 题中不应有正确答案的线索 E. 如果答案是数字,最好跟上单位 F. 测题不能直接来自课本或参考书 G. 测题中的空格不宜过多，空格长度应相等.,5) 论文题,测验组织能力、综合能力和文字表达能力，有时还可测量评价能力和创造能力 论文题目编写容易，不允许猜测和简单背诵，可以反映理解的深度。 题目少，取样缺乏代表性，特别是评分困难，既费时又易受无关因素(如文字风格、卷面整洁、个人成见等)的影响，从而使测验的可靠性和有效性降低。,编拟论文题目要注意以下几点， 1要让被试知道答案的范围和方向，例如长度、举例的详细程度等，但不可规定得太具体，以免变成一系列简答题。 2.最好要求被试在新的情境下，应用知识去解决新问题。 3题目不要过少或过大，数量要适当多些，内容要适当具体些。,4要选用具有可接受的正确答案的题目 (并不是只有一个正确答案)，不用那些仅测量意见和态度的问题。 5在测验前，对每一个题目编制几个“理想”的答案。对部分正确的回答如何评分做出尽可能具体的规定。 6一般不要有任选题，因为两个论文题目很难做到等值。,6) 应用题,计算技能、数学和科学推理，以及运用知识到新情境中的能力。 编写应用题要遵循以下原则： 1题目的陈述要使被试明白让他干什么，答案应以什么形式出现，以及对单位和精确度的要求等。 2题目中应包括对解题所需要的一切数据和信息，也可包含一些无关数