普心实验测量统计课件chapter8test development and using

第八章测验编制与使用TestDevelopment&Using2023/4/13THY,CCNU2/68学习目标掌握测验编制的基本程序掌握测验的实施过程2023/4/13THY,CCNU3/68主要内容测验编制的一般程序测验的选择测验的实施测验的评分测验结果的报告2023/4/13THY,CCNU4/681测验编制的一般程序确定测验目的制定编题计划编辑测验题目预测与项目分析合成测验测验的标准化鉴定测验编写测验手册/说明书2023/4/13THY,CCNU5/681.1确定测验目的明确测验对象(who)何种团体(年龄、教育水平、文化背景)分析测验目标(what)测什么特质或结构明确测量用途(why)用于描述、诊断还是预测三种韦氏智力测验的比较2023/4/13THY,CCNU7/681.2制定编题计划明确全面而具代表性的测验内容回顾以往的研究成果、了解受测群体实际情况考虑时代特点、向有关专家、经验丰富人士咨询和请教确定每一部分测验内容(一类行为)的题目比例双向表或项目说明书2023/4/13THY,CCNU8/68表5.1高二化学标准测验双向细目表

2023/4/13THY,CCNU9/681.3编制测验题目初步编写测题来源、双向细目表及项目说明书、数量(2-3倍)选择项目形式检查测题并初步修改项目定性分析：命中率、文字、单维性2023/4/13THY,CCNU10/681.3.1初步编写测验题目(资料收集)测题的来源直接选自国内外优秀的相关的测验修改前人测验中有关的试题依据理论或访谈调查，自己编写项目说明书项目来源、刺激种类、正确反应特点及多项选择项目情况、不正确反应特点等2023/4/13THY,CCNU11/68示例：卡特尔共收集了人格描述词汇17,953个，首先将这些词汇分为以下四类：Ⅰ-真正清楚表示人格特质的词Ⅱ-目前活动及心境Ⅲ-对性格进行评价的词Ⅳ-不能归类的词2023/4/13THY,CCNU12/68(续)抽取出真正清楚表示人格特质的词4504个。通过将词划分为同义词组，与反义词配对。形成171个同义词-反义词配对的丛类，代表4504个词；每一丛代表一种特质。如：自信的-无把握的、自大的-谦卑的、攻击的-顺从的、责人的-责己的，等等2023/4/13THY,CCNU13/68(续)171丛被缩减成36个维度，称为表面特质。后用因素分析给出16个能解释所有变量的独立因素，根源特质。187题目，16种特质，每特质包括10-13个题目。2023/4/13THY,CCNU14/681.3.2选择题目形式常用的测验题目形式判断题选择题匹配题简答题2023/4/13THY,CCNU15/68测验题型：判断题判断题中最常见的形式是是非法，又称正误法，它是提供许多陈述句或疑问句要球被试在两种可能的回答中选择一个。如：华生是行为主义的创始人：对错2023/4/13THY,CCNU16/68编制判断题的注意事项(1)在教育测验中，试题要考察的是重要的概念或原理，应避免无关或琐碎的细节，编题时最好不要照抄原文。每个题目中只包含一个重要的观念，避免两个以上的观念出现在同一道题中，如果出现这种情况最好改为两个题目。2023/4/13THY,CCNU17/68编制判断题的注意事项(2)在人格或态度问卷中，避免使用事实的或能作为解释的陈述句。不要用所有人都同意或都不同意的句子要求被试作出判断。每个试题的句子不要太长。2023/4/13THY,CCNU18/68编制判断题的注意事项(3)避免使用可以导致歧义的词，如“只有”、“都”、“没有一个”或“决不”避免使用未经过界定的词，如“一些”、“许多”或“很少”肯定和否定的句子在场度和数目上大致相同2023/4/13THY,CCNU19/68测验题型：选择题为了减少猜测机遇对分数的影响，可以用下面公式对分数进行矫正：三个答案：实得分数—（做对题数—1/2做错题数）每题所占分数四个答案：实得分数—（做对题数—1/3做错题数）每题所占分数五个答案：实得分数—（做对题数—1/4做错题数）每题所占分数通式为：2023/4/13THY,CCNU20/68编制选择题的注意事项(1)题干的陈述要简单明确，避免出现不切题的内容。题干后面的选项或答案的数目愈多，被试愈不易猜对，普遍采用四个或五个答案。同一个测验中每个题干后面，答案的数目要一致。选项中只有一个答案是正确的，而且错误答案不要错的太明显。2023/4/13THY,CCNU21/68编制选择题的注意事项(2)要使所有选项的长度大致相等，在文法上能够与题干保持一致。所有选项以简短为宜。少用“以上全对”或“以上全错”的选项。对的答案和错的答案要随机排列，使被试无法猜测。2023/4/13THY,CCNU22/68测验题型：匹配题完全匹配

问句项目=反映项目非完全匹配问句项目=反映项目2023/4/13THY,CCNU23/68匹配题编制的注意事项(1)问句项目和反映项目在性质上应该力求接近，而且通常是问句项目在左，反应项目在右。配对项目不宜过多或过少，一般为六至十五项，采用非完全匹配时，问句项目和反应项目的数量之差一般为二至三个。2023/4/13THY,CCNU24/68匹配题编制的注意事项(2)作答的方法必须予以明确的规定说明。同一组项目应印在同一页上，以免造成作答时的困扰。匹配的方法应加以明确的规定和说明。如，匹配的依据，选项是否可以重复被选等2023/4/13THY,CCNU25/68测验题型：简答题直接疑问式不完全陈述式例如：谁是红楼梦的作者?()(直接疑问式简答题)红楼梦的作者是()(不完全陈述式简答题，即填充题)2023/4/13THY,CCNU26/68编制简答题的注意事项(1)一个简答题只能有一个答案，并且答案必须简短而具体；若是填充题，则必须能用一个词、词组或短语来回答，否则不适宜于编制填充题。不应以简答题来测量零散、琐碎的知识，要尽量用简答题测量重要概念。填充题的空格不宜太多，不应因留下空格而丧失题意的完整性。2023/4/13THY,CCNU27/68编制简答题的注意事项(2)除非是语法测验或为某种特殊目的进行的语文测验，否则不能省略连词、介词、冠词等让学生填写，只能从题目中省去有重要意义的词让学生填写。在试题中避免提供正确答案的线索。如果答案是数字。最好应指明要求的精确度以及单位名称。不宜直接从教科书或其他参考书上原文抄写试题。2023/4/13THY,CCNU28/68测验题型小结：心理测验多采用是非式或选择式是非式—Eg：我希望自己能够成为一个演员是否折衷是非式—Eg：你喜欢热闹的事情吗？是否不一定二择一式—Eg：a.我喜欢批评那些有权威和有地位的人；b.在长辈或上级面前，我会感到胆怯。文字量表式—Eg：我往往把事情看得很复杂总是通常有时几乎没有数字量表式—Eg：你对自己的工作满意吗？1非常不满意2345非常满意2023/4/13THY,CCNU29/68测验题型小结：编写测验题目时的注意事项测验项目的取样应具有代表性(欲测心理特质)。测验项目的取材范围要同编题计划所列项目范围相一致。测验项目的难度应有一定的分布范围(能力与人格)编写测验项目的用语要力求精炼简短，浅显明了。初编题目的数量通常是最终所需要的数量的2-3倍，以便筛选或编制复本。测验项目的说明必须简明。2023/4/13THY,CCNU30/68例：EPQ之E你是否有广泛的爱好？你是一个健谈的人？你认为自己的活泼？在愉快的聚会中，你通常是否尽情享受？你喜欢会见陌生人？如果条件允许，你喜欢经常外出(旅行)？你的朋友多？2023/4/13THY,CCNU31/68例(续)：EPQ之N3你的情绪时常波动吗？6你曾经无缘无故觉得自己可怜吗？11你是否时常担心你会说出不该说的事情？14你是一位易激怒的人吗？18你的感情是否容易受到伤害？20你是否时常感到“极其厌烦”？2023/4/13THY,CCNU32/68例(续)：EPQ之N24你是否常因“自罪感”而烦恼？28你认为自己的“神经过敏”？30你是个忧虑重重的人？34你是否担心将会发生可怕的事情？36你觉得自己是个非常敏感的人？42你担心自己的健康？2023/4/13THY,CCNU33/681.3.3预测与项目分析预测过程中的注意事项：预测的样本：要具有代表性、小样本预测程序：按正规的要求进行，与正式测验的情况相似预测的实施，应使被试有足够的完成作业的时间，以便搜集充分的反映资料使统计分析结果可靠在预测的过程中，应就被试的反应情况随时加以记录2023/4/13THY,CCNU34/681.4预测与项目分析项目分析项目分析(定性和定量分析)、测验结构合理性等抽取同一总体的另一样本，复核测题性能两次分析结果相差甚远，重新编写、修订或删除题目2023/4/13THY,CCNU35/68补充：对预测结果的分析、测题的选择项目定量分析难度：0.35—0.65；0.500.20区分度题总相关鉴别指数(Ebel,1965)临界值测验结构合理性因素分析；聚类分析2023/4/13THY,CCNU36/681.5合成测验测题的选择测验题目编排编制测验复本2023/4/13THY,CCNU37/681.5.2测验题目编排并列直进式此种方式是将整个测验按项目内容或形式分为若干分测验，属同一分测验的项目，则依其难度由易到难排列。混合螺旋式此种方式是先将各类项目依难度分成若干不同的层次，再将不同性质的项目予以组合，作交叉式的排列，其难度则渐次上升。

2023/4/13THY,CCNU38/681.5.3编制测验复本复本的关键是等值。所谓等值就是要符合下列条件：复本测量的是同一种心理特质；复本测题的形式相同但不重复；复本题目的数量相等，并且有大体相同的难度和区分度结构。复本测验的分数分布（平均数和标准差）大致相同。2023/4/13THY,CCNU39/681.5.3编制测验复本(续)编制复本时可以先根据题目的难度将一定数量的测题按难度顺序排列：1、2、3、4、5、……如果分成两个等值的测验，可采用下列分法：

A本：1、4、5、8……

B本：2、3、6、7……如果要分成3个等值的测验，可采用下面的分法：A本：１、６、７、１２、１３、１８、１９……Ｂ本：２、５、８、１１、１４、１７、２０……Ｃ本：３、４、９、１０、１５、１６、２１……2023/4/13THY,CCNU40/681.6测验的标准化测验内容标准化：所有被试实施同一组题测验实施标准化:情境、指导语、时限(90%)2023/4/13THY,CCNU41/681.6测验的标准化(2)测验评分：尽量客观对被试的反应要及时清楚地记录，特别是对口试和操作测验，以免由于主试记忆丧失造成的混乱，并提供将反应加以分类的基础要有一张标准答案或正确反应的表格，计分键。将被试的反应和计分键比较，对反应进行分类。测验分数的解释：2023/4/13THY,CCNU42/681.7鉴定测验信、效度资料的收集测验量表与常模2023/4/13THY,CCNU43/681.8编写测验手册/说明书测验手册的内容有：测验的名称、作者、发行单位测验的目的和功用测验编制的理论背景和选择题目的依据测验的实施方法、时限及注意事项2023/4/13THY,CCNU44/681.8编写测验手册/说明书测验手册的内容：(续)测验的标准答案和计分方法测验的信度资料和效度资料常模资料2023/4/13THY,CCNU45/682测验编制实例劳教人员社会适应性量表的编制艾森克人格问卷简式量表中国版（EPQ-RSC）的修订（心理学报2000）中国人人格量表的编制高校社团心理契约问卷编制2023/4/13THY,CCNU46/68示例：劳教人员社会适应性量表的编制通过文献资料、访谈、半结构式问卷调查大量收集劳教人员社会适应项目，通过对这些项目的整理并结合关于劳教人员社会适应结构的理论构想，形成社会适应问卷的项目库。深度访谈半结构化问卷调查2023/4/13THY,CCNU47/683测验选择选择与测验目的相符的测验测验实施者在选择测验的时候，要对测试活动的目的和期望达到的结果有清楚的认识。了解测试对象的受测条件

2023/4/13THY,CCNU48/683测验选择(2)分析所选测验的特点首先要了解所选测验的概况其次是要了解测验的适用范围最后应考查测验的心理测量学指标信度效度常模2023/4/13THY,CCNU49/684测验实施测试开始前的准备

主试方面：首先，主试在测试前要熟悉测验的结构和内容以及使用方法。有时还要进行必要的训练。训练的内容包括：熟悉测验内容；掌握实测步骤；掌握记分方法；掌握解释分数的技术。其次，测验实施者要熟练测验指导语并能口语清楚而流利地说出来。2023/4/13THY,CCNU50/684测验实施(2)测试材料方面：主试在测验前要把测验材料准备好，以免短缺而临时寻找。2023/4/13THY,CCNU51/684.2测试过程中的注意事项指导语测验情景施测顺序测验焦虑2023/4/13THY,CCNU52/68补充：测验焦虑心理学的有关研究证实：能力与测验焦虑成负相关，即能力愈高的人测验焦虑愈低。成就动机水平与焦虑成倒U关系。竞争性测验的测验焦虑高，经常接受测验的人焦虑低一些。轻微的测验焦虑会增进测验效果，但焦虑太高或毫无测验焦虑，则会降低测验效果。2023/4/13THY,CCNU53/68补充：测验焦虑(续)主试的以下四种态度会容易使被试产生过度的焦虑，应尽可能避免：以测验来威胁被试，以使被试循规蹈矩。警告被试一定要尽力，因为“这项测验很重要”告诉被试答题要很快，才能在规定的时间内答完。恐吓被试说：“如果测验失败，会有严重的不良后果。2023/4/13THY,CCNU54/684.3主试与被试间良好的合作关系主试保证测验结果绝对保密对被试加以积极的鼓励2023/4/13THY,CCNU55/685测验的评分原始分数的获得原始分的转换2023/4/13THY,CCNU56/686测验结果的报告如何看待测验分数的意义：解释分数原则主试应充分了解测验的性质与功能对导致测验结果的原因的解释应慎重，函数必须充分估计测验常模和效度的局限性解释分数应参考其他有关资料对测验分数应以“一段分数”来解释对来自不同测验的分数不能直接加以比较2023/4/13THY,CCNU57/686.2如何向受测者报告测验分数使用当事人理解的语言。要保证当事人知道这个测验测量或预测什么。如果测验是以常模为参考的，就要使当事人知道他是和什么团体在进行比较。要使当事人认识到分数只是个估计。测验结果应向无关人员保密。对低分者的解释应谨慎小心。。。。2023/4/13THY,CCNU58/68思考题结合实例简述编制一个心理测验的基本程序。阐述实施心理测验应注意的问题。如何正确解释测验分数的意义。向受测者报告测验分数的基本原则。2023/4/13THY,CCNU59/68推荐阅读大学生压力量表的编制.应用心理学,2002艾森克人格问卷简式量表中国版(EPQ-RSC)的修订.心理学报,2000“华人工作相关人格量表”的编制、意义与效度.心理学报，2000，042023/4/13THY,CCNU60/68例1：大学生压力量表的编制编制的目的是：给大学生压力研究者以及心理学工作者提供一个研究中国大学生压力的可信和有效的测量工具，从而使中国大学生压力的定量化研究成为可能；2023/4/13THY,CCNU61/68编制测量题目采用开放式问卷及焦点小组，要求被试写出至少五种压力源从中识别出15种主要校园压力源。其顺