如何设计多项选择试题.pdf

ENGLISH TEACHERS 2010年2月第2期英语教师 如何设计多项选择试题 王笃勤 1 周广英 2 北京石油化工学院外语系 北京 1 0 2 6 1 7 山东省济宁市育才中学 济宁 2 7 2 0 0 0 摘 要 多项选择是各类考试中最常用的测试形式 尤其是语言知识运用项目的测试 但是 各 类试题中皆有不符合试题设计规范的现象 本文结合国内高考 中考英语试题介绍了多项选择填 空设计的基本原则和方式 为选择填空试题的设计提供参考 关键词 多项选择 题干 选项 尽管真实性评价和任务型测试开始为越来越多的人 士所接受 但多项选择由于其评分客观 方便以及适用范围 的广泛等优势 仍旧是各类考试的主要题型 不管是TOE FL GRE 还是PETS 大学英语四六级考试 高考 中考以及 各学校的期中 期末考试都采用多项选择题 但是 目前各 类考试中多项选择的试题常有违背设计原则的现象 影响 了考试的效度和信度 本文将结合我国高考 中考试题介绍 多项选择填空设计的基本规范和应该注意的问题 一 多项选择的功能 多项选择 multiple choice questions 指由多个选项构 成的选择题 可以用于语音 词汇 语法 听力 阅读 完形 由于多项选择试题多是一个答案 因此又称单项选择 多 项选择多用于测量学生对知识记忆和理解 也可以测量学 生的语言应用能力 一 测量学生的语音意识 选择填空可以用来测量学生的语音识别能力 语调 的表意功能等 不管是选择与所给读音相同发音的字母或 者字母组合 还是如下面的题 要求学生选择包含所听到 读音的单词 还是让学生根据说话者的语调判断说话者的 态度 所测量的都只是学生的语音意识 1 Listen and circle the word which has the pronunciation you hear A breatheB threadC greatD theatre 二 测量词汇和语法知识 多项选择题广泛应用于词汇和语法 但是应该强调 的是 多项选择只能测量学生的词汇或语法知识 测量学 生句子理解或包含的逻辑等理解能力 而难以测量学生的 语言运用能力 尽管高考试题将其冠以 英语知识运用 的 标题 如下面的 2 4 考查的只是use as be good to do so that固定结构 不过是知识而已 2 Let s learn to use the problem we are facing a step ping stone to future success 2008年高考试题全国卷I A toB forC asD by 3 I like getting up very early in summer The morning air is so good 2008年高考试题全国卷I A to be breathedB to breathe C breathingD being breathed 4 The weather was cold that I didn t like to leave my room 2008年高考试题全国卷I A reallyB suchC tooD so 三 测量听力中的信息识别能力和理解能力 在听力测试中 多项选择可以用来测量词汇辨认 图 片描述辨认 细节辨认 单句理解 大意理解 主题理解以 及推理判断能力 四 测量阅读中的信息识别和理解能力 阅读测试中多项选择可以用于测量学生对文章大意 的理解 作者观点态度的理解 细节的把握 词义的猜测 推 理推论等各种层次的理解 包括文章结构的分析能力 75 Which of the following shows the structure of the passage 2008年高考英语北京卷 CP Central PointP Point SP Sub point 次要点 C Conclusion 第2期 No 2 2010年2月 February 2010 英语教师 English Teachers 案 例 分 析 14 如何设计多项选择试题 五 通过完形填空的方式测量语篇 逻辑等理解 能力 完形填空是各类考试的常用题型 多数采用多项选 择的测试形式 除测量语言知识以外 还可以测量学生对 上下文逻辑 语篇结构等方面的理解 二 多项选择的设计方式 多项选择的表现形式很多 有固定多项选择 自由多 项选择 外置多项选择 内嵌多项选择 非语言多项选择等 形式 1 具有评分客观 容易 便于统计分析等优势 应用 范围比较广 多项选择的设计是否科学将直接影响测试的 效度和信度 本文将以 语言知识运用 中选择填空的设计 为例介绍一下多项选择中经常采用的方式 一 多项选择的设计原则 1 1 测量目标应该唯一 一道多项选择题应该只测量一个目标 不能既测量 时态 又测量语态 既测量从句与主句的识别能力 又测量 从句的关系词 既测量时态 又测量语序等 5 I feel very happy that I to be the host Congratulations 2007年某地区中考题 A chooseB am chosen C was chosenD have chosen 6 The road conditions there turned out to be very good was more than we could expect 2008年高考试题全国卷II A itB whatC whichD that 7 It was announced that only when the fire was under con trol to return to their homes 2008年高考试题江西卷 A the residents would be permitted B had the residents been permitted C would be residents be permitted D the residents had been permitted 2 语境适当 题干必须能提供足够的语境 保证语境没有歧义 很 多情况下 一题多解的现象多是由于语境不足所引起的 再如下面的1987年高考题 8 There was plenty of time She 1987年高考题 A mustn t have hurriedB needn t have hurried C must not hurryD couldn t have hurried 本题测量的可以是对过去事情的推测 即 她当时不 可能慌张的 时间挺充足的 也可以是对过去事情的评 注 即 她本来没有必要那样慌张 时间挺充足的 所以 B D都成立 在设计试题时必须考虑可能出现的情景 否 则什么都有可能 目前 中考和高考试题已经注意到语境的设计 但是 同时出现了语境设置过度的现象 9 Why do you suggest we buy a new machine Because the old one has been damaged 2008年高考试题江苏卷 A beyond reachB beyond repair C beyond controlD beyond description 考生没有必要看 9 的问句就可以轻松地选择答案 因为空格所在句子本身已经提供了足够的语境 3 题干中应避免泄露答案 多项选择的题干语言要简练 不能太长 也不可太 短 要为理解提供足够的信息 但同时必须注意不能在上 下文中出现类似的结构 否则就等于泄露答案 如下面对 冠词的考查 由于前面的句子出现了by train 就等于告诉 考生答案为D 10 He never travels by train He always travels by plane A theB aC hisD 不填 4 干扰项自身应该成立 对语法结构的考查 在设计干扰项时必须保证干扰 项自身的可能性 如2007年全国高考试题竟然出现了 why not visiting to visit和why don t visit的结构 虽然是 对表示建议why not do something的考查 但是另外三个 选项本身属于不存在的结构 四选一变成了一选一 严重 影响了试题的信度 2008年高考题中as told结构以及 most of which问题中干扰项的设计同样忽略了干扰项必 须具有可能性的原则 11 It s a long time since I saw my sister her this weekend 2007年高考全国卷I A Why not visitB Why not to visit C Why not visitingD Why don t visit 12 Who should be responsible for the accident The boss not the workers They just carried out the order 2008年高考试题福建卷 A as toldB as are told C as tellingD as they told 13 The growing speed of a plant is influenced by a number 15 ENGLISH TEACHERS 2010年2月第2期英语教师 of factors are beyond our control 2008年高考试题湖南卷 A most of themB most of which C most of whatD most of that 14 You re driving too fast Can you drive 2008年高考试题全国卷I A more slowly a bitB slowly a bit more C a bit more slowlyD slowly more a bit 2008年高考全国卷中出现了more slowly a bit slowly a bit more以及slowly more a bit等只有当人们出错时才能 出现的结构 试题本身就起到了一个误导的作用 中考 试题中这样的现象更是普遍 如2007年中考试题中的 以下各题出现的more cheaper the one what等都是不应该 呈现的干扰项 2 这种试题的出现无疑干扰了中国学生的 学习 15 Which ocean is the Atlantic or the Pacific The pacific A deepB deeper C deepestD more deeper 16 This is I wanted A the one whatB which C one whichD the one 5 选项应具有放入题干的可能性 所谓放入题干的可能性指选项符合句子结构对词语 形式的基本要求 比如 17 题中题干空格处显然是非谓语 动词 那么 A C D都可以列入非谓语动词的范畴 具有 置入题干的可能性 但是B却没有这种可能性 这是设计 选项时应该避免的问题 17 The director had her assistant some hot dogs for the meeting 2008年高考试题全国卷II A picked upB picks up C pick upD picking up 6 选项应该简洁 一般情况下 选项不能比题干长 要避免这一点首先 要做的是 题干中可能重复出现的单词不要出现在选项 中 否则 会增加考生的阅读负荷 3 18 Had he worked harder he A must have got through the exam B would have got through the exam C would get through the exam D will have got through the exam 19 Had he worked harder he through the exam A must have gotB would have got C would getD will have got 7 选项长度应该均衡 一般情况下 选项的长度应该均衡 否则就有可能给 考生某种暗示 如应避免出现 20 题之类的问题 最起码 应该为 21 的形式 20 I think he must be up to something He looks so strange today A trying B interested C doing something he shouldn t D ready 21 I think he must be up to something He looks so strange today A trying something entirely new B interested in something C doing something he shouldn t D ready to do something 8 选项结构要一致 选项中不能出现一个选项与其他选项结构明显不同 的情况 否则就可能造成一个选项为废项 或三个选项为 废项 就会影响试题的效度 22 You should his mistake He felt hurt so much A have correctedB have accepted C have admittedD not have noticed 9 选项类属要一致 一般说来 四个选项从类属上要一致 如词类一致 话题一致 共现关系一致等 如果不一致就会出现考点不 唯一的弊端 如 23 题中A明显与其他三个选项类属不 同 应该避免 23 The road conditions there turned out to be very good was more than we could expect 2008年高考试题全国卷II A itB whatC whichD that 10 不可出诡题 测试不能为考生设置陷阱 引导考生出错 陷阱题又 称诡题 比如下面 24 题选项A构成it is known to all的 句型 很容易误导学生 另外 本题还违背原则9 24 is known to us all is that the 2008 Olympic Games will take place in Beijing 2008年高考试题福建卷 A ItB WhatC AsD Which 二 多项选择试题的设计方式 多项选择填空试题的设计一般要依照以下程序 16 语法选择 上海卷 语法填空 广东卷 语法选择 上海卷 Pearson Correlation 1 096 Sig 2 tailed 514 N4848 语法填空 广东卷 Pearson Correlation 0961 Sig 2 tailed 514 N4848 为了分析不同省份高考试题之间的相关度 笔者于2008年11月在山东某县高中部以高三某班48名学生为被试对象 用2008年广东高考 卷和上海高考卷进行了模拟测试 测试在一周内完成 之后对学生在两套试题中的表现进行数据分析 发现两套试题在听力和语法等方面存 在很大的难度差异 听力试题不给问题是构成影响学生表现的一个十分重要的因子 语法选择难度远远高于语法填空 且两者不存在相关性 甚至有轻微负相关 对试卷的内部结构分析显示 广东卷的听力信息提取和阅读信息匹配与总成绩无显著相关 从而影响了试题的效度 如何设计多项选择试题 1 确定测量目标 不同的试题对词汇句法的测试要求不同 高考将其 归为 语言知识应用 范畴 因此 首先要确定所测量的是 学生的何种能力 2 选择测试项目 测试是通过对部分知识和技能的测试评价学生的语 言知识和语言运用的能力 这就要求测试项目必须具有代 表性 类推性 以2008年上海高考语法和词汇为例 测试 点包括congratulate on however well prepared等固定搭 配 there is a lot of work to do it has been proved that so that的倒装等句型 这些都属于记忆的范畴 类推性与代 表性都不够 全国卷II中15题对like后介词用法的考查 却非like常用结构 不管是什么等级的测试 都必须保证 所选测试项目的典型性 代表性和类推性 3 设计问题和选项 要保证问题设计和选项设计的质量 需要组织一个 命题小组 经过数次审读研讨 要求命题者仔细分析测试 项目的特点 设置适当的语境 保证语境符合考试图式的 要求 即使是多项选择填空也应该保证试题本身的真实 性 符合选择试题设计的基本原则 减少影响因子 4 试做 试题设计完之后必须经过测试 一般情况下是选择 与受试考生同类的群体进行模拟测试 统计分析试题的 内部一致性 检测试题的信度 调整试题的分布 剔除信 度低的问题 计算每个问题与总成绩之间的相关系数 从 而保证每个测试项目与总成绩呈正相