（教育技术学专业论文）基于计算机的口语考试系统中试题与试卷的设计与实现.pdf

接要 摘要 随着计算机技术的发展及其在语言教学与测试中的广泛应用。基于计算机 的口语考试( 以下简称“口语机考”) 系统已经研发成功并付诸实践，其可行性 褥到了认霹。本文针对霜语梳考系统孛豹试题与试卷及箕相关翊题进行磅究， 并完成了该系统中试题与试卷相关内容的设计与实现。 作者首先调研和分析了固内外面试型囡语考试及网谱机考中所应用的试题 类型，以考察各种口语考试试题在口语规考中的适用性。、其次，针对现有口语 瓿考中所使用的试题，对菲交际性试题的改进、交际性试题和a b 卷的设诗与实 现进行需求分析。再次，根据需求分析结果、非交际性试题的特点殿其在考试 过程中的呈现方式，设计了考生考试客户端程序( 考试过程中的动作指令、试 题的解辑一执行方式) ，并在此基麓上，对复述试题避霉亍了改进。然嚣，俸者以 小组讨论试题为主，对口语机考中的交际性试题进行设计，作者设计了小组讨 论的模型，分析了小组讨论中不同的发言策略后，完成了小组讨论试题的具体 实现方案，并对小组讨论试题在实骣考试中麓应用情况做了分析。最后，馋者 分析了在叠语机考中使用a b 卷的特殊性，并利用调整动作指令痔列的方式，完 成了在同一考场中使用a b 卷的功能，增加了口语机考中试卷选用的多样性和灵 活性。 本文设计豹麓语概考系统中菲交际性试趱酶实现方式结构合理、灵活，便 于试题类型的增加和系统的扩展，已在实际开发中成功应用。交际性试题的设 计与实现，丰富了口语机考的题型，也为其他研究者对豳语机考中交际性试题 豹进一步研究提供了基礁。 关键词：计算机口语考试试题试卷 a b s t r a c t a b s t | a c t c m p u e r 钯c h o l o g yi s u di l l l a n g u a g e 把a c h i n g 勰da s s e s s m e 毗w i d e l y 稍 w a d a y s s o m ee o m p u t e r - b a s e do r 蠢专e s t i n gs y s t e m sh a s e e nd e v e l o p e 莲a n dp 瞌 i n t 0 p r a c t i c es u c c e s s m l l y t h i sm e s i se x p l o r e s t h ei t e m sa i l d p a p e r s i nm e c o m p u t e r - b a s e d o r a l t e s t i n gs y s t 锄a n dr e l a t e dp r o b l e m s ， a n d如s i g n sa n d i 攥p l e 瓣e 鑫耄st 魏e s ep 甜逸o f 落e 钯s l i 蕤gs y s 德整 t h em e s i ss t 眦sw i t hi n v e s t i g a i i n ga n da n a l y z i n gm ei t e m s i ns e v e 】谢 f a c e t o - f a c eo r a le n g l i s ht e s t sa n dc o m p u t e a s e do r a le n g l i s ht e s t st of i n di t e m s a d a p t 曲l e oae 伽l 弦t e r - b a s 以q 隧酞g l i s h 钯皱i 鹋s y s 专e 嫩。a & e f 搬融馕e 洳f i n t r o d u c e st h ea r c h i t e c t u r eo fac o m p u t e r - b a s e d o r a lt e s t i n gs y s t e m ，a n a l y z e st h e r e q u i r e m e n t sf o ri t e m sa n dp a p e r si nt l l es y s t e m t h e n ，a c c o r d i n gm er e q u i r e m e n t s ， t l 玲a 毗h o rd e s i g n sas e to fa e t i o n s 岛rt h et e s t ，a 堪ap r o e e d u r et op a r s et 量l ep a p e rt oa n a c 专i o 矬l i 髓，t od i s p l 鑫yt h ei 稔m s 禚dl o 诧e o 砖墩er e s p o n s eo f 攮ec a n d i 莲a 埝s 鑫c e o 诚鹋 t ot h ea c t i o nl i s t w i t ht h ef a c i l i t i e so ft h ea c t i o nl i s t ，m ea u t h o rr e d e s i g n sr e t e l l i n g i t e m s a f t e rt h a t ，t h ea u m o rp r o p o s e san e x i b l ea i l de a s i l yi m p l e m e n t e dm o d e lo f g 毽pd i s e 毽s s i o 鹣烈d 题藤y z c s 岛掰s 妇熏e g i 。s 毽s e di 鑫妞s y s e m 重oe o 挝鼯l 也e p r o c e s so fg r o u pd i s c u s s i o n b a s e do n 雠sm o d e l ，m ea u t h o ri m p l e m e n t st h eg r o u p d i s c u s s i o np 缸o ft h es y s t e m ，a n dc o n d u c t sa ne x p e r i m e n t a lt e s tt 0e v a l u a t et l l e s o l 撤i o no fg 麟l pd i s e u s s i o n 1 nt h el a s t ，t h e 烈t 幻fh p l e m e 嫩st h ea b p a p c f 姥豉b y a 内u s t m gt h et w oa c t i o nl i s t so fa 熊a b p a p e r ，t h i sm a k e sm e t c s tm o r ef l e x i b l e ： t h em e t h o dd e s i g n e dt op a l r s et h ep a p e ra n de x e c u t et h et e s ta c t i o n sm a k e st l l e s y s t e mm o r ee x t e n s i b l e ，a n de a s i l yt oa d dn e wi t e mt y p e s 。1 h ei m p l e m e n t a _ t i o l l so f i l e 溅sl i kg 潮p 镞毽s s i o ne 戚c 疑si 绝难l 弹e s 醴妇：沧熨i 驾s y s 专e 撵，懿dp 愆v i s 鑫 n a t f o 肌f o r 内【n h e rs t u d y i 嘞例o r d s ：c o 珏l p u 耗曲a s e d ，o r a l ，r s t i n g ，i l e 饿，p a p e r i i 表题录 表目录 表4 1 考试动作指令2 5 表4 2 包含两个小题的问答题的动作指令序列2 6 表4 3 包含两个小题的问答题的显示控翻过程。2 7 表4 4 复述题的指令序列，。2 8 表5 1 小组讨论中考生发言次数频数表4 l 表6 1a 、b 试题参数4 7 表6 2a 、b 试题单独生成的动作指令序列。4 8 表6 。3 经过同步调整后的a 、b 试题动作指令序剜。4 9 v | 疆墨娥 图目录 图3 1 基于计算机的口语考试系统结构1 5 圈4 ，1 试题相关的数据库表结构2 0 匿4 2r ) e f li b t 模拟考试蹬语部分赛匿2 3 图4 3 基于计算机的口语考试系统交甄时序图2 4 图4 。4 试卷的解析一执霉亍过程2 5 蓬5 1 翔入小组讨论韵国语槐考交互时序圈3 董 图5 2 小组讨论模型3 2 图5 3 小组讨论时序图3 7 圈5 4 小组讨论考生状态图。3 8 图5 5 小组讨论考生界面3 9 图5 6 小组讨论阅卷界蕊。4 0 圈6 。la 器卷时闻霹步调整示意图毒5 v u 中国科学技术大学学位论文原创性和授权使用声明 本人声明所呈交的学位论文，是本人在导师指导下进行研究工作 所取得的成果。除已特别加以标注和致谢的地方外，论文中不包含任 何他人已经发表或撰写过的研究成果。与我一同工作的同志对本研究 所做的贡献均已在论文中作了明确的说明。 本人授权中国科学技术大学拥有学位论文的部分使用权，即：学 校有权按有关规定向国家有关部门或机构送交论文的复印件和电子 版，允许论文被查阅和借阅，可以将学位论文编入有关数据库进行检 索，可以采用影印、缩印或扫描等复制手段保存、汇编学位论文。 保密的学位论文在解密后也遵守此规定。 作者签名：耋叁这 别年多月f 日 第l 章绪论 第量章绪论 1 1 问题的提出 计算机技术在语畜教学与测试中的应用越来越广泛，利用计算机进行的各 种语言测试也在抉邃增长。对于基予计算机髂秘谮考试( 以下简称辞疆语祝考努) ， 晷志已经有了不少尝试。中国科学技术大学放2 5 年开始使用翻语机考( 人民 网，2 0 0 5 ) ，至今已成功举行全校性的期末口语考试十余次，共1 8 万人次参加 了该考试。佘继飞等( 2 0 0 s ) 分奉斤了豳语枕考系统鲶功能需求，设计并实现了 这一瑟语考试系统。吴毅鳖、赵文耘等( 2 0 黼) 提出了西语梳考系统的概念模 型，他们开发的复量天翼口语考试系统就使用了这一模型。此外，基予溉b 的 口语考试系统也在设计与尝试之中( 贾卓燕，申瑞民，2 0 0 4 ) 。在高考英语豳语 考试中，部分省市已经开始使雳翟语祝考。焉在全隧公共英语等级考试中( p 酣s ) 中，低缀别的口语褫考也在进行试点( 赵褪华，刘庆思，2 0 0 6 ) 。在国井的考试 中，从2 s 年开始的f e li b t l 考试的口语部分同其他部分一样都采用基于计 算机的方式进行。恧憋雒f 在延续通过电话进行考试这一传统方式的同时，也 开始提供通过计算机来完成溺语测试的方式。 一些研究者( 蔡基刚，2 0 0 5 ，张燕敏，2 0 0 7 ，顼军平，2 0 0 7 ) 从鼙语枧考 的效度、信度以及可操作性等方蘸对潮语机考进行考察，积极肯定了口谮孝强考 的可行性，但是也有的研究者( 鄙东林，2 0 0 5 ，李琳，2 0 0 ) 认为使用计算祝 进行翻语考试，很难做到互动，希望能在考试中增加对话、辩论等交互性强的 试题，增强互动性，并模拟真实的交际场景，使考生有身临箕境的感觉，胰焉 提高瑟语机考的效度。 相对于传统面试型口语测试( 以下简称“面试 ) ，口语机考中考生所面对 是计算机，如何在计算机上实现面试中的试题，是口语机考设计时要考虑酌阎 琵l 叠稔韵s o f 觏g 瓤h 毡saf o 托i 萨l 黼祭a 静，是宙嚣髑( 嚣霉u e 越i o n a l 儆i 甥s e r v ，美謦教帮考试 服务处) 帮办的一种针对母谮非英语的人进行的荚谮水平考试。1 d e f li b t ( 1 o e f li n t e m c t - b a s e d 能s t i n g ) 是基予互联网遴褥懿1 e f 考试。 ：v e r s a n l ，翦身为s e t ( s p o e 珏g l i s h t c s t ) ，是塞鞋a r c o u 糠撼供的鑫动评测结浆的英语西语考试服务 魏t 审：露w w 獭s e 转a n t c o m l 第l 章绪论 题。在匠试中，考生与考官或考生之闻是蟊对面交谈，考富可以奁接对考生进 行提问，并辅助以文本、图片等方式来为考生提供试题信息：而在豳语机考中， 考试的指导语及试题内容都将通过计算机来输出给考生。在口语机考中实现面 试中的试题时，怎样利用多媒体技术，创造更燕接近真实场景的测试环境，增 强考试过程中的交互性，是值得研究的问题。 同时，随着计算机技术的不断发展以及臼语机考研究与实践的深入，会有 更多的适合机考的新试题被设计出来，这就要求翌语机考系统率试题的实现方 式具有较高的灵活性和可扩展性。所以，在设计口语机考系统中试题、试卷结 构，以及试题与试卷的处理方式等方面要充分考虑到可扩展性与可维护性。 在现有的臼语枧考系统的馥用中，学生认为试卷中应增加对话形式麴试题 以更好羹垂发挥自己的墨语水平( 余继飞，2 0 0 5 ) 。两基长弦、宋漆、王焰等( 2 0 0 6 ) 进行的大学英语口语测试任务的效度研究结果表明，小组讨论是学生最喜欢， 认为最能反映他们口头交际能力、最适合他们语言水平、难度适中、答题时感 觉最舒适酶任务。翅是在目前的霹语机考中，这类交互性强翦试题还没有摄好 的实现方式。 综上所述，作者提出以下待研究问题： 阀题一：如何改进现有口语飙考中的试题与试卷设计? 闯题二；如何改进系统的絮构以适应试题的增加及变化? 问题三：如何在口语机考中增加交互性强的试题? 1 2 研究内容与霉的 本文主要进行口语机考系统中试题与试卷及其相关问题的分析、设计与实 现。具体研究内容如下： 第一，调研晷感癸多种口语测试中所用的试题，分析其在盈语机考中戆适 用性。 第二，改进口语机考系统中非交际性试题的设计与实现。 第三，分析口语撰考系统率薛交际性试题豹特点，以小组讨论为主完成交 际性试题的设计与实现。 第四，设计并实现口语机考系统中的a b 卷功能。 幸箬者希望通过对墨语机考系统中试题与试卷及其相关问题的实现方案进行 2 第l 章绪论 改进，充分剩用计算机技术、多媒体技术，增强口语机考的交互性，提离墨语 机考的信度与效度，使口语机考获得更广泛的应用。 。3 研究方法 本文主要采用了文献调研法、问卷调查法，实践法等研究方法。 第一，本文采用文献调研法，对各种口语考试题型以及国内外各种阴语测 试采用的试题进行调研。 第二，为评估小缀讨论在考试中的应用情况，作者对参加小组讨论的考生 进行问卷调查，以探讨本文所设计与实现的小组讨论模型的交际性和可行性。 第三，本文采用实践法，提趱了试题与试卷的解析一执行过程，并已在系 统中实现且成功应用予实际考试中；作者在提磁小组讨论模型的基础上，完成 了整个模型的实现，并成功进行了实验考试。 。4 论文的逻辑结构 本文总共分为绪论、口语考试试题综述、口语机考系统中试题与试卷需求 分析、非交际性试题的改进设计与实现和交际 生试题设计与实现、a b 卷设计与 实现和结束语共七章武容。各章的内容简述如下： 第l 章绪论：陈述本文的研究背景、研究内- 容与目的、研究方法以及论文 的逻辑结构。 第2 章口语考试试题综述：综述各种口语考试题型的特点，并调研国蠹外 多种墨语测试中所用的试题，分析各种试题在黼语机考中的适用性以及龋前实 现情况。 第3 章口语机考系统中试题与试卷需求分析：介绍口语机考系统的整体结 构，以及对试题与试卷的改进设计，增加薪题型的需求进行描述。 第4 章非交际性试题的改进设计：改进现有系统中非交际性试题的设计， 改善系统程序结构。 第5 章交际性试题设计与实现：以小组讨论为主，提出交际性试题在霾语 机考系统中的实现方式，并对小组讨论的应用情况进行分析。 第6 章a b 卷设计与实现：分析口语机考中a b 卷的特点，设计a b 卷的时 间同步算法。 第l 章绪论 第7 章结束语：总结本文的成果，指出研究中存在的问题，给后续研究者 提供参考。 4 第2 章口语考试试题综述 第2 章口语考试试题综述 本章首先对口语考试中各种试题题型进行概述，其次调研国内外口语面试 和机考中试题应用情况，分析各种试题在口语机考中的适用性，以期为传统面 试试题的计算机化和设计口语机考新试题提供指导。 2 1 口语考试题型综述 口语考试题型主要有朗读、复述、问答、看图说话、评论、面谈、小组讨 论与角色扮演等。口语考试题型可以分为结构主义口试题型和交际口试题型， 其中结构主义口试主要测试说的技能以及与说相关的分项技能，其典型题型包 括朗读、复述、看图说话、问答等。而交际口试更注重语言的社会交际功能、 得体性和有效性，其典型题型包括角色扮演、面谈和小组讨论( 邹申，2 0 0 5 ) 川。 朗读要求考生在事先准备( 或无准备) 的情况下大声朗读几句话或一篇文 章，根据语音语调是否正确、读得是否流利为标准评分( 邹申，2 0 0 5 ) 强5 。h e a t o n ( 2 0 0 0 ) 料认为大部分学生在离开学校以后不会再被要求大声朗读文字材料，这 种考试方式的反拔效应( 考试对考生的影响) 是有害的，特别是当考生通过练 习朗读误导了有效的阅读技巧时。朗读通常用来测试考生的发音，为了设计出 适合朗读的试题，就要设想真实生活中考生可能会用到朗读的真正场景，比如 朗读一些指导语或说明材料等。高霞、朱正才和杨慧中( 2 0 0 6 ) 研究了朗读在 外语教学与测试中的作用，认为朗读表现了外语学习者所掌握的语言知识( 语 音、词汇、语法知识) 、背景知识、理解技能和策略、言语计划制订和言语产出， 是其语言能力的表现，朗读任务作为水平测试的一种题型是可行的，但是也指 出，朗读任务没有交际的成分，用朗读任务来测试口语交际能力则有一定的局 限性。虽然朗读题型有其不足之处，但在不少外语测试中仍在采用这一题型。 复述题型是请考生听( 或者读) 一篇材料，然后用自己话语重新叙述一遍 ( 邹申，2 0 0 5 ) 强5 。复述试题可以评估出大多数通过朗读测试的语音要素，但 是复述试题也常常测量了考生的其他技能，例如听力、阅读理解、记忆等( h e a t o n ， 2 0 0 0 ) 9 0 。 问答题型是考生根据自己的实际情况、常识或者试题提供的内容来回答问 第2 章口语考试试题综述 题。这一考试题型在面试中通常是考官根据试题内容或者考生的回答进行提问； 焉在录音叠语考试、图语枫考等菲直接面试的翻语考试中，一般是考生根据给 定材料或者常识进行回答。 看图说话题型是利用图片、图表等为考生提供信息，要求考生就图片或图 表进行描述或评论，以考察考生是否可| 以准确传达图片或图表中的主要信息。 在四、六级日语考试中，就使用了看图说话题型，并结合了闻答题，在考生描 述图片后，由考官就考生的回答进行提问。而p e t s 中则采用了另一种形式的基 于图片的试题，由两名考生共同观看同一图片，一名考生描述图片后，另一考 生可以补充或者发问，这也增加了基于图片的试题的交互性。看图说话题型中 提供的图片可以根据题尽的内容为一张或者有关联的多张图片。 评论题型是要求考生就试题中给出的某一观点、引语、名言、谚语进行评 论，发表自己的见解。这一题型的试题内容较抽象，需要考生有较高的语言技 能。视频评论也可以看作这类试题的另一种形式，其试题内容不是壶一个抽象 的句子给出，而是充分利用电影剪辑、新闻报道、动画等资料，通过视频的方 式让考生获得更多信息。 描述题型就某一事物或事件让考生进行细致介绍，与评论题型一样，描述 题型所给出的试题内容也比较捶象，需要考生具体良好的缀织思想并通过嗣语 传达信息的能力。 面谈通常指考官与考生之间的交谈( 文秋芳，1 9 9 9 ) 4 5 ，且往往围绕一个或 几个话题进行比较深入的交谈，考官的提问存在一定的内在逻辑关系且与考生 的反应有密切联系，这种考试形式具有很强的交际性，通过面谈，考宫能够比 较清楚地了解考生的口语水平。面谈被认为是最明显的测试口语交流的考试形 式( h u g h e s ，2 0 0 0 ) ，但是阴语面谈的评分是很主观的，有时候会有较低的信度 ( h e a l o n ，1 9 9 8 ) ，为解决这一问题，应有明确的评分规则并对考官进行培调。 小组讨论题型把几个考生分为一个小组，让他们就指定的话题进行交流。 为了使每个考生都有机会发言，一个小组的考生人数一般不能超过4 个( 文秋 芳，1 9 9 9 ) 4 5 。小组讨论的话题，应尽可能是每个考生都熟悉的内容，这样每个 入都可以有话可说。在小组讨论中，由于是多入合作完成考试任务，所以要保 证每个考生都有公平的表现机会。大学英语四、六级网语考试中就采用了三个 人一组的小组讨论题型。 角色扮演题型给考生提供一个模拟现实生活的情景，并规定说话入和听话 6 第2 章口语考试试题综述 人的身份，同时说明考生需要用语言完成的任务( 文秋芳，1 9 9 9 ) 4 4 。与小组讨 论一样，角色扮演也是一种交际性很强莳题型，也要求多个考生之闻的互相配 合，每个人都要在角色扮演中体现自己的作用，这样才能考察出考生的口语交 际能力。 本文根据考生在考试过程中是否需要与考官或其他考生进行交际，将这些 豳语考试题型分为j 交际性试题题型和交际性试题题型两种。其中非交际性试 题题型包括朗读、复述、回答问题、看图说话、评论，这些题型在考试时不需 要考生之间或考生与考官之间的交际。交际性试题题型包括面谈、小组讨论与 角色扮演，这些遂型在考试时需要考生与考宫或者其他考生进行交际。 在口语考试中题型应多样化，尽量从不同角度观察考生的口语能力( 邹申， 2 0 0 5 ) 3 1 5 。由于不同的题型在考察口语能力各方面技能时侧重不同，口语机考 系统应实现多样化的题型，这样，考试组织者就可以根据考试目的选择不同的 题型组合，以提高测试效度。 2 。2 面试型口语考试的试题分析 作者主要针对面试型口语考试中的c e t s e t 、i e h s 和p e t s 等考试，对各 种口语考试中所使用的试题进行了调研，同时分析这些试题在口语机考中的适 用性。 2 。2 1e e t s e t 考试 大学英语四、六缀口语考试( c e 暑s e 善) 是出教育部大学英语四、六级考试 委员会举办的全困性的大学英语口语考试，在校大学生只有在四级考试的成绩 达到8 0 分或者在六级考试中达到7 5 分，才有资格报名参加口语考试。这主要 是由于这一考试采用面试的形式进行，无法组织更多的考生参加。这也使得一 些在笔试中没有达到成绩要求的考生失去了参加瑟语考试的枧会。尽管四、六 级考试委员会表示会积极研究开发计算机阴语测试，以进一步扩大口语考试规 模，但目前还没有具体的时间表( 蔡基刚，2 0 0 6 ) 。 c e s e t 的考试形式为两名考官对三名考生进行面试。c e s e t 考试分三 部分：第一部分是考生和c e t 授权的主考进行交谈，采用闯答的形式，时阆约 5 分钟，这一部分的主要作用是热身；笫二部分包括1 5 分钟的考生个人发言和 4 5 分钟的小组讨论，时间共约1 0 分钟。其中个人发言，一般是看图说话试题， 7 第2 章口语考试试题综述 考生看一张图片，准备1 分钟后，描述图片并回答考官的相关问题。小组讨论 主要壹三个考生之间进行交流；第三部分由主考再次提闻以进一步确定考生的 口头交际能力，时间约5 分钟。 c e t - s e t 的题型主要是看图说话、问答以及小组讨论。前两种题型属予非 交际性试题，在豳语机考系统中已经存在，对于小组讨论试题，在现有的口语 机考系统中，也有一些实现形式。有的采用发言前按隧车键进行申请，说话结 束后按空格键停止这样的方式来宪成考试之中的交互过程，而在阅卷时为了能 够清楚区分各考生的声音，则需配备多组喇叭，使每个人的声音从不同的方向 传过来( 蔡基刚，2 0 0 5 ) 。这种方式显然使阅卷交得复杂费力，而且在考试过程 中，由于只能等考生鱼行按键停止发言，所以会出现某位考生说话时间太长， 而其他考生却没有发言机会或者发言时间太短的情况。也有的采用一种固定顺 序与时间的小组讨论方式或两入分组进行辩论方式。这种方式的缺点是人数少， 说话时澜固定，不能达到讨论的飚的。如果增加分组入数，则会由于发言顺序 及时间固定，使讨论与真实情景差别过大。总之，在现有的口语机考巾，这类 交互性强的试题还没有好的解决方案。本文的第五章将详细讨论作者对口语机 考中小组讨论试题的设计与实现。 2 2 2le l t s 考试 i e t l s ( i n t e m a t i o n a le n 9 1 i s hl a n g u a g et e s t i n gs y s t e m ，国际英语语言测试系 统) 是由英甏文化委员会( b 越s he 辩i 跌剑桥大学考试委员会( 魄i v e f s i l yo f c 蛐b r i d g el o c a le x a m i n a t i o n ss y n d i c a t e ) 和澳大利亚教育国际发展署( i d p e d u c a t i o na u s t r a l i a ) 三方合作组织的英语能力测试。目的是为测试到英语国家学 习或工作的考生的语言能力，根据申请出国人员的不同，分为学术类和移民类 两种。 i e t l s 考试包括听力、阅读、写作和口语四个部分。其中口语部分采用考官 与考生一对一面试的直接交流形式进行考试，测试考生是否可以有效用英语交 流。 王驸l s 麓语考试包括三个部分。第一部分是介绍与面试，约4 5 分钟，主要 是考官介绍自己并确认考生身份，考官选择熟悉的话题对考生进行简单面试。 第二部分是个人发言，约3 4 分钟，其中包括1 分钟的准备时间，考官要求考生 就写在张任务卡片上的一个特定话题发言1 2 分钟，然后考官阋一两个闯题。 8 第2 章口语考试试题综述 第三部分是双寅讨论，约毒5 分钟，考富与考生一起讨论与第二部分相关内容的 问题，但讨论内容更加抽象。 i e t l s 口语考试的题型主要有问答、评论或描述、面谈。通过这些题型来考 察考生是否可以流利连贯地表达自己的思想，是否能够准确合理地选择词汇并 正确运用语法，语音是否可被理解，从而对考生的口语能力做如评估。 i e t l s 考试的题型都体现了很强的交际性，试题内容中提供的语言应用场景 也较真实，所以在题型朝试题内容这两方蘧，都是僮得在蹬语枧考中借鉴的。 毽是口语橇考中不存在真实约考富，对话形式的瑶谈无法矗接在在叠语祝考中 实现。一种可选的方式是，通过播放视频，在视频中由考官对考生提问，形成 对话，但是在这种实现方式中，视频中的考官不可能理解考生的回答，并针对 考生豹回答进行提闻，戳形成交谈，磊只麓按照固定的试题逐一提褥，缀难达 到面谈的实际效果。 2 2 3p e t s 考试 豫t s 翔蠢l i e 嚣鹱落i 婊r 髓s y 惑e 礅，全晷公共英语等缀考试) 是蜜教育酃考 试中心组织的全国性英语水平考试，共分为五级。在p e t s 考试口语部分中，采 用面对耐交谈的方式，礴名考官对两名学生( 一级b 是一名学生) 进行测试。 测试时，一名考宫不参与交谈，专事评分；另一名考官主持懿试，随时与考生 交谈并评分。p e t s 口语试题随着缀别的增加题型有所变化盟难度逐渐增加。 除面试形式的p e t s 口语外，教育部考试中心对p e t s 的计算机辅助豳语考 试也进行了研究开发，并开始试点考试。 p 嚣s 鹩主要题拦有考生个入薅况介绍、两个考生互辐闽答、诖两名考生进 行讨论( 根据图片或者就某个抽象的问题) 、考生个人演讲等。不论是低级别还 是高级别的p e t s 题型，都强调了豳语的交际性。在口语机考中，两个考生互相 同答或讨论这样翳题型可以茵助予簿优骑夺组讨论题型来实现。 2 3 基于计算机的口语考试的试题分析 霹前基于计算瓿的弱语考试主要有霹f 塞li b t 、v 鹨蛾等，壶于这些考试 的目的不同，所面向的考生群体不同，所以采用的题型也各不相同。 9 第2 章口语考试试题综述 2 。3 1 丁o f e lib t 考试 t o e f li b t 是由e t s ( 美国教育考试服务处) 从2 0 0 5 年9 月开始提供的一 种英语考试。t o e f li b t 考试强调各项语言技能的综合应用，测试考生在学院 或学术背景中的所有溪种语言技能，包括口语。哟e f li b t 睡语考试的内容力 求真实，语言与日常真实的学术背景中是致的，其口语试题语料收集宙授课 和互动的课堂、实验室、办公时间的活动、学习小组或一些日常生活交际( 例 如，在书店或在注册办公室等地) 。 t 。嚣f li b t 赡韶语考试包括以下部分：第一部分包含两个独立的试题，试 题内容是考生所熟悉的话题，要求考生根据个人的知识和经验来回答。第二部 分是两个基于阅读和听力材料的试题，即考生阅读一篇短的文章或听一段短的 对话，结合短文或对话内容来回答润题。第三部分是两个基于听力材料的试题， 包括一段短的课堂录音或对话。考生需要从对话中总结出关键思想来回答闯题。 在考试中，考生可以作笔记帮助自己完成回答。 t o 醴li b t 的围语考试所用题型主要是闻答，但是给考生提供信息的方式 却是通过短文、日常对话、课堂录音等多种途镪实现的。这些试题不仅考察了 考生的阴语能力，且要求考生有较好的阅读与听力理解能力，充分体现了t o e f l i b t 考试强调各项语言技能的综合应用这一特点。采用这些突出语言技能综合应 用的题型，约e f li l j i t 从以下方蕊来评估考生的口语能力：对语法的控制、词 汇的选择；清晰、连贯，易于理解的表达；能理解、连接并传达相关信息。 从上面分析看出，t o e f ti b t 的口语考试题型主要是闯答，但由于其通过 短文、听力等方式提供试题信息，这样，试题所考察的就不只是考生的口语能 力，同时考察了考生的阅读和听力能力，也需要考生对试题中提供的材料有很 强的理解、获取能力以及组织信息的能力。尽管e l j 于考试目的不同，t o e f li b t 的题型不可照搬到口语机考中，但日语机考系统可以借鉴这种通过多种媒体和 途径为考生提供试题信患的方式。 2 3 2v e r s a n t 考试 v e r s 凝l 考试的前身是s e t ( s p o k e ne n g l i s h 髓s 1 ) ，是o r d i 娃a 绝公司的一种完 全自动化的口语考试。它使用语音处理技术，通过电话或计算机进行考试，考 试结束后，立即会给出考生的得分以及对考生语言技能的等级描述，其分数由 总分和四个诊断性分项分数组成，其中总分由四个分项分数加权计算得出。 l o 第2 章豳语考试试题综述 v e 鹩a m 曩前提供英语和西班牙语两种语言的目语考试。其中用于英语墨语 的v e r s a n tf o re n 9 1 i s h ( h a r c o u r ta s s e s s m e n t ，i n c ，2 0 0 7 ) 测试母语非英语的人们 的口语能力。v e r s a n tf o re n g l i s h 是一个十分钟的测试，共分五个部分：朗读、 重复旬子、篱答、造句和开放式阀答。前四个部分的回答将进行自动分析。对 这些试题从口语能力的不同方面进行独立的评估，包括流利程度、句子理解、 词汇、语音语调和意群。每个方面的成绩由多个试题的得分综合计算得到，增 加了测试的的信度。v e r s a n t 的前身通过电话进行考试，目前，v e r s a l l t 也可以通 过网络在计算机上进行。 v e r s 撇t 考试的指导语和试题本身的内容由不同的人朗读而成，以便于考生 进行区分。在通过电话考试时，考试组织者会在考生进入考试前为考生提供打 印的试卷；两逶过计算机考试时，试题内容显示在孱幕上。 v e r s 觚tf o re n g l i s h 考试各部分的具体题型是朗读、重复句子、简答、造句 和开放式问答。 第一部分是朗读，提供给考生一组标有序号的句子，由考生按照要求的顺 序朗读如来，每次读一个。在通过电话考试时，试题打印在试卷，在考莆发给 考生。而通过计算机考试时，试题文字显示在计算机屏幕上。朗读试题中四个 连续的句子组成一组。将句子放在一组有助子考生在上下文中消除单词的歧义， 也有助于提示考生如何大声朗读每个旬子。考试时显示三组甸子，然看隧祝地 让考生朗读其中的八个句子。系统会告诉考生朗读哪个句子，当系统听到考生 朗读完一个句子后，再提示考生朗读另一个。 朗读部分的这些甸子在结构与词汇上相对篱单，这种题型可以考察英语学 习者的发音和阅读的流利程度。朗读是考试的歼始部分，对予很多考生，朗读 是他们熟悉的题目，所以可以使考生较舒适的进入整个考试的交互模式。 第二部分是重复甸子，这一部分要求考生严格逐字重复听到的句子。要重 复的旬子按照难度逐步增加的顺序提供给考生，句子的长度从3 个单词增加到 1 5 个单词。不同于其他考试中的复述故事，v e r s a i l t 的重复句子试题要求考生必 须严格按照试题中的单词进行重复。 因为重复甸子的试题要求考生将一串连续的语音组织戒一个语言单元，这 就测试了他们对句子的掌握程度。另外，这个题型要求的是究整的全句重复， 而不只是几个单词或短语，所以，这也考察了考生的语音以及考生口语的流利 程度。 第2 章口语考试试题综述 第三部分是简答，在这一部分，考生听一些问题，并用一个单词或短语来 回答。每个问题问一些基本的知识，需要简单的基于时间、顺序、数字、语义 内容和逻辑的推理，但问题并不要求任何特殊的知识和文化、地理、历史等学 科知识，应该都在考生所熟悉的知识范围之内。而问题也是以口语对话形式提 出的。 通过回答这些问题，考生需要识别语音中的单词及其在上下文中的语义， 并作适当推理。简答题型主要考察了考生在词汇方面的接收程度和产出程度。 第四部分是造句部分，考生需要将三个随机打乱顺序的短语重新组织成为 一句话。这一部分的题目也是通过口语说给考生的，并没有打印在纸上或者显 示在计算机屏幕上。 考生在造句的过程中，必须理解这些短语可能包含的意思，并且要知道一 个短语如何与其他短语在语法上和语义上进行组合搭配。一个人能够造出的句 子的长度和难度受限于他在口语处理时能够记忆的语言单元的大小。这很重要 的反应出了考生自动获取和提取语义项、建立短语、句子结构的能力。这些过 程越自动，就越能体现考生对口语的熟练程度。造句题型需要考生构建并说出 完整的句子，测试了考生对句子的掌握以及表达的流利程度。 第五部分是开放式问答。考生听一个问题，在回答中要针对该问题给出自 己的意见，并进行解释说明。对这一部分试题的回答目前并不进行自动评阅， 而只是用来收集语言样本，或者供授权的使用者人工听取。 v e r s a n t 考试所采用的题型都比较简单，在口语机考中都已有实现。由于 v e r s 肌t 考试采用语音处理技术，对考生回答进行自动评阅，可以立即给出分数 及评价，这是其他考试系统中所没有实现的。尽管采用了作文自动评阅的e t s 还没有采用口语自动评阅的打算( j 锄i e s o n ，2 0 0 5 ) ，但是随着v e r s a n t 的推广， 很多企业与机构已经开始使用这种自动评阅的口语测试，例如，第2 9 届北京奥 运会中青岛帆船赛志愿者的选拔和近期的宝洁公司招聘中，均使用v e r s a l l t 对应 征者的进行口语测试。从v e r s a i l t 的广泛应用可以看出，计算机自动评阅的口语 测试可以提供方便、快速的考试服务，将是基于计算机的口语考试的发展趋势。 2 4 本章小结 从以上题型综述及对各种口语测试所采用试题调研结果来看，面试中所采 1 2 第2 章口语考试试题综述 用的题型较为多样，且交互性较强，在考生与考官、考生之间都会产生一定的 交际；而机考中由于人工智能、语音识别、自然语言处理等方面的限制，目前 还没有更好的机制实现计算机与考生的交互，因此，口语机考中主要实现的是 非交际性试题，但是，在非交际性试题的实现过程中，多媒体技术可以提供图 片、声音、视频信息等，较面试中的信息提供途径更为丰富多样。 交际性试题是面试型口语考试中的重要题型，在c e b s e t 、i e l t s 、p e t s 等面试型口语考试中，都采用了这类试题，而且占据时间比重很大，在c e s e t 中考生与考官对话和小组讨论两部分占去了考试总时间的2 3 多，丽i e i j s 和 p e t s 中则都以进行阴语交际为主。但是目前口语机考中对交际性试题还没有很 好的实现方式。 第3 章口语机考系统中试题与试卷需求分析 第3 章口语机考系统中试题与试卷需求分析 本南首先介绍嗣语机考系统的总体功能与结构，接着基于上一章的文献综 述，对非交际性试题的改进设计、交际性试题和a b 卷的设计与实现分别进行需 求分析，为设计出满足实际需要的机考试题与试卷打好基础。 3 1 口语机考系统概述 3 。 。l 口语机考系统功能概述 口语机考系统为组织实施完整的考试过程，包含以下功能：系统设置维护、 试题库及试卷管理、考务管理、现场考试、阅卷评分。 系统设置维护负责对系统中所霈要的数据库服务器、文件服务器等资源进 行管理和维护，是整个考试系统良好运行的基础。试题库及试卷管理功能为口 语考试提供试题及试卷，试题编写者可以通过这一部分提供的界面为试题库增 加试题或进行组卷。考务管理负责创建并维护一次考试，完成考场和考务安排、 考试现场调度、阕卷分配以及戒续报告和统计分析等功能。现场考试是隧语机 考实施的关键，由监考机和考生考试客户端两部分组成，两部分在考试过程中 保持通信。监考机控制考试流程，向考试客户端发送考试指令，并监控考生的 考试状态。考生考试端是机考系统与考生的接豳，考生通过与系统的这部分 进行交豆，完成考试过程。阅卷评分部分提供给评分员使用，评分员通过这一 功能听取考生的答题录音、给考生评分并提交成绩或评语。 试题与试卷的编写在试题库与试卷管理中完成，而试卷的解析与显示控制 是在考生考试客户端实现，所以本文对日语机考中试题与试卷的改进主要针对 考试客户端进行。 3 1 。2 口语机考系统结构概述 瑟语机考系统通过网络将系统的各个部分连接起来，实现系统需要的各种 功能。 下谣以作者所在实验室开发的大学英语口语考试系统为例，说明口语机考 1 4 第3 章口语机考系统中试题与试卷需求分析 ( d e s c r i p t i o n ) 、复述故事( s t o r yr e t e l l i n g ) 、听短文或对话后回答问题( l i s t e n i n ga i l d q & a ) 、就某一观点、引语、名言、谚语进行评论( c o r m e n t ) 、看图说话( p i c t u r et a l k ) 和视频评论( m o v i et a l k ) 等试题。作者参与组织了利用该系统进行的十余次全校 的口语考试，发现在实际考试中使用了该系统提供的大多数题型的试题，但是 对于系统中的复述题型，却没有实际采用过。究其原因，是由于该系统中的复 述题型是听力复述，即先让考生听一段故事，然后再用自己的话语叙述出来， 而并不支持阅读一段短文而后进行叙述的形式，部分英语教师认为这种听力复 述试题对考生的听力理解能力要求较高，所以没有在历次考试中被采用。因此， 作者将对复述题型进行改进，使其在支持听一段故事进行复述的同时支持阅读 一篇短文而后进行复述的形式。 3 2 2 程序的可扩展性需求 可扩展性是软件系统设计中的一个原则，主要是指软件设计应考虑将来的 变化，在增加新的功能或者对现有功能进行修改时，以尽量减小对现有系统功 能的影响( w i k i p e d i a ，2 0 0 8 ) 。在系统设计时，可以采取隔离变化、降低耦合等方 法提高可扩展性。 随着口语机考的广泛应用，对试题的需求不可避免地会发生变化，也会有 新的试题题型出现，上述对复述试题的改进就是一例，所以，系统程序结构应 具有可扩展性，在试题题型增加或变化时能够灵活处理。 在基于计算机的考试系统中，通常由考试客户端对试卷直接进行解析并显 示出来，而后接收考生的回答。这种方式导致考试客户端对试题的形式依赖太 大，不利于试题的变化和增加。为此，在口语机考系统设计时，也应考虑到试 题题型的增加及变化等情况，设计良好的软件结构，使系统易于扩展、维护。 3 3 交际性试题需求描述 3 3 1 交际形式的需求 交际性试题强调语言的社会交际功能，是由考生之间或者考生与考官合作 完成的，在考试过程中，考生要进行多回合的口语交流。不同于现实生活中的 真正交际，在口语机考中实现交际性试题，说出的话是通过话筒输入的，而听 到的话是通过耳机输出的，这就要保证考生与其他考生或考官之间可以通过耳 机和话筒进行即时交流，一方所说的话能立即让参与交际的其他人听到，而其 1 6 第3 章口语机考系统中试题与试卷需求分析 他人也有机会傲出相应回答，通过口语祝考系统实现交际。 3 3 2 交际过程管理的需求 在真实的交际中，人们不仅可以通过口语进行交流，同时也会采震艘体语 言、眼神等方式来进行沟逶。但是在口语枫考中，考生无法看到与自己进行交 际的其他人，只能通过口语进行交流，更容易发生同时说话或者没有人说话等 情况。同时，在考试中也会存在有的考生控制交际过程的大部分时间，丽有的 考生则没有机会说话的情况，在匿试中出现这种情况时，会有考官进行予预， 以给每个