《教育科学研究方法》第五章

教育科学研究方法签到扫码下载文旌课堂APP扫码签到（签到时间：）签到方式

教师通过“文旌课堂APP”生成签到二维码，并设置签到时间，学生通过“文旌课堂APP”扫描“签到二维码”进行签到。测验研究法第五章任务目标思政目标①培养科学严谨、精益求精、追求卓越的工匠精神。②培养锐意进取的精神和创新意识，不断提升自身教育科学研究水平。知识目标①了解测验研究法的要素与类型。②熟知试卷质量的评定。③掌握试卷编制的基本步骤，以及试题的命题要求与编制技巧。技能目标①能够编制出合理、有效的测验试卷。②能够对试卷的质量进行评定。思维导图章节导航测验研究法概述试题的命题要求与编制技巧试卷质量的评定试卷编制的基本步骤第一节测验研究法概述美国心理学家雷蒙德·卡特尔（1905—1998）在心理测验、个体差异的测量，以及应用心理学的倡导方面颇有建树。他认为人格的基本元素是特质，经过多年研究确定了最基本的16种根源特质，并发表了《卡特尔十六种人格因素量表》（简称“16PF”）。这个量表被公认为权威的人格测验表，并作为经典人格测验使用至今。人们可以依据该量表的测验统计结果推算一个人个性中的双重特征，如适应性与焦虑性、内向性与外向性、感情用事与沉着冷静、怯懦与果断等。此外，该量表还可以计算出一些特定类型的人格因素，如创造力强的人格因素、在新环境中有成长能力的人格因素等。案例引导

案例引导请思考：测验研究中常用的工具有哪些？一、测验研究法的要素（1）定性分析要素是指测验对象，既可以是教育研究中的人，又可以是事物或现象。是指客体的属性和特征，既可以是外显的，如小学生的年龄、体重等；又可以是内隐的，如小学生的智力、道德观念、劳动观念等。（一）客体（三）标准（二）内容是指测验的准则与方法。例如，测验试卷的编制、实施、计分及分数解释的要求和方法。一、测验研究法的要素（1）定性分析是指测验所用的量表。研究者需要借助标准化的量表进行测验研究。（四）工具0102类别量表是指研究者根据一种分类标准，将测验对象的不同属性或特征进行分类，并标以不同数字符号的一种测验工具。类别量表的数字符号只起到分类作用，不能进行加减乘除。等级量表是指研究者根据一种特征或标准，将测验对象分为不同的程度和等级，并进行排序的一种测验工具。等级量表的数字符号还能说明不同类别的大小等级或某种属性的程度。一、测验研究法的要素（1）定性分析是指测验所用的量表。研究者需要借助标准化的量表进行测验研究。（四）工具0304等距量表是指既可以将测验对象分为不同的类别和等级，还可以确定测验对象之间的数量差别和间隔距离的一种测验工具。等距量表的数字符号可以进行加减运算，但是不能进行乘除运算。等比量表是指不仅具有上述三种量表的全部性质，还可以测量不同测验对象之间的比例或比率关系的一种测验工具。等比量表的数字符号还可以进行加减乘除运算。

（2）请你思考四种量表之间的联系，并与身边的同学进行讨论。（3）若将百分制测验量表转换成等级制测验量表来表示成绩是否可行？请说明理由。（1）请你和同学们讨论下列四张表分别属于哪一种类型的测验工具。二、测验研究法的类型（一）根据测验标准化程度划分是指研究者采用按照严格编制程序编制的试卷进行测验的一种测验方式。标准化测验具有严格的编制程序，包括试题的抽样、试题难度与区分度指标的分析、施测指导语与施测条件的确定、计分标准的设计、分数的解释、资料的收集等。具有客观、准确和应用范围广的特点。1．普遍调查法标准化测验1二、测验研究法的类型（一）根据测验标准化程度划分是指研究者采用按照灵活编制程序编制的试卷进行测验的一种测验方式，如随堂测试试卷。具有自由、灵活和省时的特点，通常适用于日常教学测试中。但这种方法相对于标准化测验缺乏一定的标准性和严谨性。1．普遍调查法非标准化测验2二、测验研究法的类型（二）根据测验目的划分终结性测验是教师在教学结束后对学生进行测验的一种测验方式。是教师全面考查学生知识掌握情况的重要方式。诊断性测验是教师对经常表现出学习困难的学生进行测验的一种测验方式。这种测验方式有助于教师对学生的个人问题进行测验，找出行为背后的原因，提出相应的解决方案。形成性测验是教师在教学活动过程中经常对学生使用的一种测验方式，一般在教完一个单元或一个章节时进行，是教师及时了解学生学习情况的重要方式。010203

请思考以下两个问题并与身边的同学进行讨论。（1）小学数学期末考试属于哪种测验类型？（2）语文教师在课堂上进行了“看拼音写词语”的测试。这种测试属于哪种测验类型？二、测验研究法的类型（三）根据测验内容划分1．智力测验

是指测验对象智力及其发展水平和特点的一种测验方式。测验对象智力的高低通常以智商（IQ）来表示。比较著名的智力测验有韦克斯勒儿童智力测验、瑞文标准智力测验等。世界上第一个智力测验表法国心理学家阿尔弗雷德·比奈和他的助手西奥多·西蒙编制的比奈—西蒙智力测验表是世界上第一个智力测验表。这个测验表共有30个测验项目，涵盖儿童的记忆、理解、常识、图像等方面，其目的是甄别智力异常儿童和智力正常儿童，从而有助于对智力异常儿童进行特别的教育。1905年的比奈—西蒙智力测验表在今天看来虽然存在一些问题，但在当时引起了许多教育家、心理学家的注意，它是公认的、最权威的智力测验表，为智力测验的科学发展找到了正确的前进方向。

二、测验研究法的类型（三）根据测验内容划分2．能力倾向测验是指测验被试者的潜能，预测被试者的能力发展倾向的一种测验方式。能力倾向测验一般分为两种：①一般能力测验，旨在测验被试者多方面的潜能；②特殊能力测验，旨在测验被试者某方面的特殊潜能，如运行能力倾向测验。二、测验研究法的类型（三）根据测验内容划分3．成就测验是指测验被试者经过某种教育或训练后对知识、技能掌握程度的一种测验方式。成就测验一般分为两种：①学科成就测验，如听力测验、识字测验等；②综合成就测验，如期末综合考试。二、测验研究法的类型（三）根据测验内容划分4．人格测验是指测验被试者人格心理特征的一种测验方式。心理特征有性格、态度、兴趣、动机等。比较著名的人格测验明尼苏达多项人格测验、卡特尔16因素人格测验、9型人格测验等。二、测验研究法的类型（四）根据参与测验的人数划分0102是指研究者在同一时间测验多个被试者的一种测验方式。优点是收集信息的效率较高。但测验的结果影响测验的稳定性和准确性。2．团体测验是指研究者在同一时间只测验一个被试者的一种测验方式。这种方式费时费力，要求研究者具有较高的专业能力。。1．个别测验二、测验研究法的类型（五）根据测验材料划分是指测验内容以文字的形式表现，被试者也用文字作答的一种测验方式。这种测验方式适用范围较广，但是会受到被试者不同教育背景的影响，在一定程度上影响测验的有效性。1．文字测验2．非文字测验是指测验内容以图形、模型、仪器、工具、实物等形式表现，被试者通过手工操作作答的一种测验方式。这种测验方式适用于被试者文字表达困难或被试者教育背景差异较大的研究。课堂总结测验研究法的要素测验研究法的类型第二节试卷编制的基本步骤一、明确测验对象与测验目标（一）明确测验对象也就是明确测验哪些个人或团体。研究者可以依据年龄、性别、职业、受教育程度、民族、文化背景等指标来区分测验对象。（二）明确测验目标试卷的编制要以预定的测验目标为基础，从而保证试卷编制的有向性，避免试卷编制的盲目性。研究者需要对测验目标进行详细分类，以便对知识与能力作深入的分析。二、限定测验内容（一）确定测验内容及比重研究者一般通过命题双向细目表来确定以下几个问题：①测验内容中所涉及的每一内容范围的相对比重；②测验目标中每一层次目标的相对比重；③每一测验目标层次在每一测验内容范围上的相对比重，即要明确容易、中等、较难知识点的比重。测验目标测验内容知识理解运用分析

与综合探究合计内容范围A11397232内容范围B3565221内容范围C1534215内容范围D—348—15内容范围E1626217合计63224308100

命题双向细目表二、限定测验内容（一）确定测验内容及比重命题双向细目表由三个要素构成：①测验目标；②测验内容；③测验目标和测验内容的比例，即权重。权重则可以依据以下两条标准来确定：①每一内容范围的比例应与该内容项目在整个教学领域里的相对重要性相符；②每一目标层次所要求的比例应与研究者认为该目标层次在被试者水平中的重要性相符。二、限定测验内容（二）收集测验材料测验材料要适合测验目标测验材料要能够代表该科教材的全部内容01020304测验材料要有普遍性测验材料要适合被试者的程度并能鉴别被试者的水平三、设计测验试卷（一）选择测验类型在设计测验试卷前，研究者应首先考虑测验类型。一般情况下，测验类型根据被试者的特点来确定。

例如，当学生有语言缺陷时，教师宜采用非文字测验；当学生数量较多，测验时间和经费又有限时，教师宜采用团体测验。三、设计测验试卷（二）确定测验题型测验题型有客观题和主观题。

客观题包括选择题、是非题、匹配题等具体题型，主观题包括简答题、论述题、作文题等具体题型；客观题与主观题各有所长，往往一方的长处恰好是另一方的短处。

因此，在确定测验题型时，研究者应将两者结合起来使用。三、设计测验试卷（三）编制测验试题研究者应根据测验内容所要考查的目标，结合各种题型的特点，遵循有关题型的命题原则来编制具体的测验试题。三、设计测验试卷（四）确定测验时限以测验时限为依据，测验可以分为速度测验和难度测验。

速度测验的时限应当严格限制，这种测验需要使最快的被试者也不能在规定时间内完成全部测验题目。

难度测验的目标是考查被试者的水平差异，一般以能充分发挥被试者水平或能力，且不致出现作答疲劳为原则，来具体确定测验时限。三、设计测验试卷（五）确定试题数量试题数量的多少取决于多个因素：①规定的测验时限；②测验所采用的题型；③阅读、计算和文字书写量；④测验内容覆盖面。确定试题的总题量后，研究者必须考虑与测验目标及内容相对应的各种题目所占的比例。这一比例必须与命题双向细目表中规定的比例相吻合。三、设计测验试卷（六）确定评分标准1．确定标准答案

客观题的标准答案表就是代表正确答案的数目或符号；主观题的标准答案表相对复杂一些，应标明正确答案与允许变化的范围，或各种可以接受的答案要点。2．统一评分规则客观题的答案一般都是唯一的，主观题的评分会带有较多的主观色彩。因此，研究者必须制定一份统一的评分规则，给出客观公正的评分。三、设计测验试卷（七）编排测验试题1．并列直进式是指研究者依据试题的性质，将试题分为若干份，并对同一份中的试题从易到难进行排列。2．混合螺旋式是指研究者为了使被试者对各类试题均有反应，首先将各类试题依据不同的难度分成若干层次，然后将不同类型的试题予以组合，各组间的试题难度有交叉且试题难度渐次上升。三、设计测验试卷（八）设计统一的指导语1．被试者指导语包含测验目标说明、被试者作答要求、作答时限、试题计分方法等内容。研究者需要简单、清楚地表述指导语，并将指导语放在测验试卷的开头供被试者自行阅读。2．主试者指导语包含试卷发放、测验计时方法、测验过程中的注意事项等内容。研究者需要详细地表述指导语，并单独编制一份指导语供主试者阅读。三、设计测验试卷（九）编制复本复本是指与所编制的测验试卷有相同的测验对象、测验目标、测验内容、测验题型、题量和难易程度的平行试卷。复本在测验研究或重要考试中充当替补试卷。四、试测测验试卷试测测验试卷是指研究者把所编制的测验试卷或复本拿到与测验对象特点大致相同的试测对象中去测试，以便为分析测验试卷或复本的科学性提供相关资料。

在试测试卷的过程中，研究者应注意下列事项。01020304试测对象必须是将来正式测验的测验对象全体中的一个代表性样本。试测的实施过程与实施场景应与将来正式测验时的情况相似或一致。试测时限可以灵活变动，最好能让每一个被试者都将题目答完，以便充分收集被试者的作答反应资料。在试测过程中，研究者应及时记录被试者的各种反应情况，如作答所耗费的时间、被试者的态度等。五、分析测验试卷（一）定性分析试卷的定性分析是指研究者依据自身的知识和经验，对测验试卷进行逻辑判断，然后作出质的评价。0102030405

①测验目标是否恰当；②命题双向细目表中测验内容和测验目标的权重是否合理，测验内容与测验目标是否相符，测验内容的覆盖率是否足够；③试题的编制是否符合命题要求；④试题的内容和数量是否符合命题双向细目表的要求；

⑤试题的编排是否合理，试卷的印刷是否有误。五、分析测验试卷（二）定量分析

试卷的定量分析是指研究者依据试测所获得的相关资料，运用科学的统计技术，对试卷的信度、效度、难度和区分度作客观的分析。课堂总结限定测验内容设计测验试卷试测测验试卷分析测验试卷明确测验对象与测验目标第三节试题的命题要求与编制技巧一、命题要求（一）目标明确（二）重点突出（三）重组语句（四）文字浅显（五）防止连环（六）切合实际二、编制技巧（一）单项选择题简称“单选题”是试卷中最常用的题型之一。单选题在结构上包括两个部分：①题干，即呈现一个问题的情景，由简单问句或不完全的陈述句构成；②选项，即该问题的可能答案，包含一个正确答案和若干错误答案，这些错误答案又称“诱惑项”。单选题覆盖知识点的范围较广，答案唯一，评分客观。它常用来考查被试者思维的敏捷性和判断的准确性。二、编制技巧（一）单项选择题01题干简洁明确单选题的题干要表述简洁，意思明确，减少不必要的说明，并尽量把各选项中共同的字句放在题干里，避免题干过长降低试题的测验效果。二、编制技巧（一）单项选择题02诱惑项要有迷惑性增加诱惑项迷惑性的方法包括：①使用被试者常犯的错误概念；②使用被试者惯用的模糊性用语；③使用与正确项同一性质的诱惑项；④让诱惑项与正确项有相似的长度和表述形式；⑤让诱惑项与题干有某种语义关联。二、编制技巧（一）单项选择题03避免暗示单选题的正确答案在形式、内容或性质上不能特别突出，以避免给被试者某种暗示。试题编制者无意提供的暗示主要表现在以下几个方面：①联想暗示，即正确答案重复题干中的某个词，使被试者易通过联想而猜中正确答案；②长度暗示，即正确答案的长度明显比其他选项长或短；③逻辑与语法暗示，即答案与题干的逻辑和语法不一致，使被试者易从逻辑和语法方面判断出正确答案。请指出下列单选题中的不妥之处，并与身边的同学进行讨论。例1：“两条异面直线”这一概念（）。A．是指在空间中不相交的两条直线B．是指在空间中位于两个不同的平面上的两条直线C．是指在空间中不在同一平面上的两条直线D．是指在空间中某一平面和这一平面外的两条直线例2：英国的首都是（）。A．北京B．美国C．伦敦D．巴西

例3：2+3=（）。A．大于4 B．大于6C．5 D．9

二、编制技巧（二）配对题配对题是单选题的一种变式，它由多个题干和多个选项构成。题干与选项可以完全匹配，即题干数量与选项数量相等；也可以不完全匹配，即选项数量多于题干数量。配对题较易编制，评分客观，能在较短时间内测验大量相关资料。它常用来测验和判断某些术语的含义或意义以及某些人所取得的成就等记忆性知识。二、编制技巧（二）配对题01020304配对要求要明确性质必须相同数目要适当配对唯一研究者在编制配对题时，应掌握以下编制技巧。二、编制技巧（三）填空题

填空题是指题干提出一个陈述，其中缺少一个或几个关键词，要求被试者填写的一种题型。填空题应用范围较广，答案唯一，被试者作答受猜测因素影响较小。它常用来考查被试者对知识的记忆和理解能力。二、编制技巧（三）填空题1．填写内容重要5．措辞必须明确2．空白不宜过多3．空白位置醒目4．空白长度相当研究者在编制填空题时，应掌握以下编制技巧。请指出下列填空题中的不妥之处，并与身边的同学进行讨论。例1：学会使用常用的语文工具书，初步具备

和

的能力。例2：钱塘江入海的地方叫

，

宽达

，

却只有

。例3：如果

，我校便将腾飞。

二、编制技巧（四）是非题

是非题是指给被试者一个句子并要求被试者判断正误的一种题型。是非题较易编制，评分客观。它常用来考查被试者对基本概念、性质、原理、定则、相关程序的认知和判断等。1．是非界限分明2．只包含一个核心概念3．避免暗示编制技巧请指出下列是非题中的不妥之处，并与身边的同学进行讨论。例1：所有的作家都会写诗。 （）例2：我国北方的天气很冷。 （）

二、编制技巧（五）简答题简答题是指要求被试者对所提问题用几个字或几句话来回答的一种题型。简答题较易编制，但是其评分不能完全客观公正。它常用来考查被试者对基础知识、基本概念、基本原理的掌握和记忆情况。问题范围要确定答案唯一问题要有启发性123

请指出下列简答题中的不妥之处，并与身边的同学进行讨论。例1：写出中国三大人口众多的城市名字。例2：我国四大文学名著有哪些？

例3：请给出面积的定义。

二、编制技巧（六）论述题论述题是指被试者根据题目要求和自己对问题的理解，清晰而全面地阐述自己观点的一种题型。它常用来考查被试者组织、归纳和综合运用知识的能力，解决问题的能力，以及探讨问题的能力。编制技巧1．设计较高层次的问题2．陈述问题要明确

3．明确答案范围课堂总结命题要求编制技巧第四节试卷质量的评定一、信度（一）信度的含义信度是指测验结果的稳定性和可靠性，即测验结果是否客观真实地反映被试者的实际情况。它主要反映多次测验结果的一致性，如果多次测验的结果是一致的，就说明这份试卷的信度较高；反之，如果多次测验的结果不一致，就说明这份试卷的信度较低。一、信度（一）信度的含义例如，某小学六年级一位学生经过多次智力测验，其智商均在100左右，结果基本一致，这说明这份试卷是可靠的、可信的；如果经过多次智力测验后，结果相差较大，那么就说明这份试卷是不可靠的、不可信的。

信度高的测验试卷在教育教学中可以起到以下作用：①为教师或其他教育工作者提供可靠的信息，为他们的教育预测和决策提供依据；②能使教师对学生的评价变得客观和可靠，也使学生对自己的认知更符合实际情况，从而有助于教学相长。一、信度（二）信度的计算信度的计算一般采用皮尔逊相关系数公式：

相关系数如果为高度的正相关，则表示测验试卷的信度较高；反之信度较低。一、信度（二）信度的计算

1．再测信度

是指用同一测验试卷对一组被试者测量两次所得分数的相关系数。再测信度反映的是两次测验结果有无变动的情况。

再测信度计算方法的优点在于提供了有关测验结果是否随时间而变动的相关资料，其缺点是易受被试者练习和记忆的影响。一、信度（二）信度的计算

2．复本信度是指用同一个测验的两份试卷测验一组被试者所得分数的相关系数。复本信度计算方法的优点在于避免了再测信度可能引起的练习效应和记忆效应。这种计算方法要求两份或两份以上的试卷在内容、形式、数量、难度、区分度等方面相同，因此，编制两个或两个以上质量完全相同的试卷的难度较大。数学试卷的信度小学三年级的数学教师张老师编制了两份试卷。在正式对学生进行考试前，他想测量一下试卷的稳定性和可靠性。因此，张老师在三年级学生中随机抽取了8名学生，让这8名学生对试卷和复本进行作答。试卷满分为100分，张老师将8名学生两次的成绩都记录了下来，如图所示。

序号12345678试卷17976827480787083试卷27374857281756886测验成绩

……（详见材料P116-117）一、信度（二）信度的计算

3．分半信度是指按照奇偶数分半方法或完全随机分半方法将测验试卷分成对等的两半，再计算被试者在每一半测验试卷上分数的相关系数。分半信度计算方法的优点在于能更好地测量测验试卷的稳定性和可靠性，应用范围较广，其缺点是将试题分为平均数、标准差基本相等的两半的难度较大。二、效度（一）效度的含义

效度是指测验结果的准确性和有效性，即测验结果与测验目标之间的符合程度。

例如，用心理量表测验学生的学业时，由于心理量表不符合测试学生学习水平和知识掌握程度的目标，心理量表是无效的；又如，拿一把用于测量物体长度的尺子去测量物体的质量，那么这个尺子也是无效的。二、效度（二）效度的计算

1．内容效度是指测验内容能否较好地反映测验目的，即测验内容是否具有较好的代表性。它用测验内容与测验目标之间的一致性程度来表示。2．效标关联效度效标是指作为参照标准用的量数。关联效度是指测验分数与效标之间的相关程度，计算方法即计算两个测验对一组被试者测验两次所得的两组分数之间的相关系数，又称“效度系数”。三、难度（一）难度的含义

难度是指试题的难易程度，即试题的通过率。它是试题对被试者知识和能力水平适合程度的指标。三、难度（二）难度的计算

通过率是以答对试题的人数与总人数之比来表示：1以通过率计算难度以通过率计算难度主要适用于客观题。例如，在100名学生中，答对试卷客观题的第一题人数为90人，则第一题的难度为0.90（90÷100）。三、难度（二）难度的计算

平均数是以某试题的平均得分与该试题的满分之比来表示：2以平均数计算难度以平均数计算难度主要适用于主观题。例如，某道主观题满分为10分；10名学生的得分分别为2分、5分、9分、10分、4分、8分、7分、5分、3分和0分。则这道题的平均分为5.30[（2+5+9+10+4+8+7+5+3+0）÷10]，这道题的难度为0.53（5.30÷10）。三、难度（二）难度的计算

当被试者规模较大时，客观题和主观题采用极端值计算方法较为方便。具体操作步骤如下：步骤一：将所有被试者的总分数由高至低进行排列。步骤二：从最高分向下，取全部试卷的27%作为高分组。步骤三：从最低分向上，取全部试卷的27%作为低分组。步骤四：按照公式计算难度值。3以极端值计算难度三、难度（二）难度的计算

例如，在一次数学期末考试中，参与考试的有500名学生。教师将这500名学生的试卷总分由高至低进行排序，算出高分组和低分组各有135人（500×27%）。其中，高分组答对第一题的有108人，低分组答对第一题的有27人。则第一题难度的计算过程如下：=108÷135=0.80=27÷135=0.20=（0.80+0.20）÷2=0.50由此可得，第一题的难度为0.50。3以极端值计算难度三、难度（三）难度的一般要求

0102一般测验测验目标是了解被试者的个体差异。只有当接近0.50时，试题才能在最大程度上区分被试者水平。一般测验要求测验试题的平均难度为0.50，而各个具体的试题难度在0.30～0.70内。选拔测验对于选拔测验而言，试题的难度应更多地接近录取率。例如，某项测验用于筛选出极少量优秀被试者去参加国际比赛，而且这项测验的录取率为5%，则测验试题的难度最好控制在0.05左右。四、区分度（一）区分度的含义

区分度是指试卷对不同水平的被试者加以区分和鉴别的能力，是衡量测验试卷试题质量的一个重要指标。若试卷中的某道试题使得水平较高、能力较强的被试者都答对了，而水平较低、能力较弱的被试者都答错了，则这道试题有较好的区分度，具有较高的鉴别力。四、区分度（二）区分度的计算

区分度可以通过比较高分组和低分组在某一试题上通过率的差异来表示，这一差异称为鉴别指数。鉴别指数的计算公式如下：四、区分度（二）区分度的计算

例如，在一次语文期末考试中，参与考试