第六章-设计效度及课件

第六章累进效度及辩论

（一）湖南师范大学外国语学院邓杰教授教学目标了解设计试环节的基本概念、焦点问题及证据来源了解考试规范的主要内容了解听、说、读、写能力的定义和特点了解语言知识、语言理解能力和语言表达能力的类别及常用测试方法设计效度基本概念：考试大纲；考试规范焦点问题：考试规范的清晰度、详尽度和可操作性证据来源：考试规范、考试大纲、教学大纲及相关文献基本概念考试大纲（Test

Syllabus）：由教育部门或考试机构颁发的、有关“考什么”及“如何考”的纲领性文件。主要从宏观层面对考试的内容和方法进行概括性描述，使用对象为考生和教师考试规范（Test

Specification）：基于考试大纲的一系列具体的、可操作的规定，包括考试目的、考试对象、考试内容、考核目标、考试方法、考题形式、试卷结构与分值、考试时间、施考流程、评分标准等，使用对象主要为命题人员和考试评估人员，附录中往往包括样卷、词汇表、能力标准和内容类别等设计效度辩论焦点问题清晰程度（Clarity）：描述是否清晰、明确？有没有界定不清、分类不明的情况？详尽程度（Specificity）：描述是否详细、全面？有哪些内容缺失或不够详尽？可操作性（Practicability）：各项规定是否容易理解且方便使用？有哪些操作不便或不切实际的之处？

证据来源考试大纲及教学大纲考试规范及其说明相关文献考试规范的主要内容考试目的考试的原因、应用范围等考试对象考生的个人及群体特征、文化和背景知识、语言知识和技能等考试内容语言形式：语音、词汇、句法和篇章结构语境意义：关于事物属性、关联和过程的话语信息，及其隐含程度、概括程度、信息层面（短语、分句、句子、段落、篇章）考核目标层级分类：语言理解（听力、阅读）、语言表达（口语、写作）水平等级：初、中、高；一～N级；A1、A2、B1、B2等等“能做”描述（Can-Do

statements）考试规范的主要内容考试方法择答式（判断、配对、选择）和做答式（填空、简答、写作），应兼顾效度、信度和可操作性考题形式客观题和主观题，应注重语言使用的真实性、交互性试卷结构与分值组成部分及各部分的题量、权重，应注意主、客观题的比例考试时间考试日期、起止时间及各部分的时长，应注意时长的适宜性考试实施可行性和可操作性，包括考试资源、考试安全、操作流程等评分标准客观题的标准答案和主观题的评分细则听解能力定义：有针对性地获取或领会口头话语信息的能力听解过程：语音感知、词汇辨别、语法分析、语境推导听解模式自下而上（bottom-up）：从微观语义到宏观知识自上而下（top-down）：宏观知识对微观语义的预期和整合上下结合：上述两种情况同时存在“能做”描述能识别形式与结构：语音单位、词语单位和语法结构能理解直接意义：词语、句子、语段的表面意义能理解隐含意义：交际功能、语气、意图、态度、文化背景等能适应一定的语速：慢、标准、快听力材料：日常交谈、专题讲座、新闻报道、影视作品等阅读能力定义：对书面材料的理解能力阅读方式：精读（intensivereading）、泛读（extensive

reading）、跳读（skimming）、寻读（scanning）阅读模式：自下而上、自上而下或上下结合“能做”描述能识别形式与结构：单词拼写、语法结构、文体特征等能理解直接意义：词、句、段、篇的表面意义能理解隐含意义：交际功能、意图、态度、情感、文化背景等能达到一定的速度：n词/分钟阅读材料：日常生活、学习、工作中的各种文字、图片、表格等口语能力定义：说话人在一定交际情境中以口头表达的方式进行的表情达意的能力口语活动的特点：交互性（目的、动态、即时）、准语言性（语调、重音、音量等）、非语言性（表情、手势等）“能做”描述能正确使用语言形式：发音（音素、连音、省音、变音等），遣词（单词、短语、语块/固定搭配等），造句（语法形式、句子结构、典型句式等），连贯（连接词、逻辑结构）等能注意语言表达的丰富性：词汇、语法、句型的多样性和复杂性能注意语言使用的得体性：正式与非正式、文化习惯等能注意语言交际的有效性：话轮（发起、参与、保持、结束、转接），准语言（重音、语调、语气、音量），非语言（表情、手势），补救措施等写作能力定义：以书面形式进行语言交际的能力写作的特点：文体多样性、书写规范性、读者确定性、阅读延时性、字迹观赏性“能做”描述能做到书写规范、清晰：标点和格式正确，字迹清楚等能准确表达自己的意思：用词准确、语法正确、观点明确、逻辑清晰、层次分明等能体现语言使用的丰富性：词汇、句式、衔接手段等灵活多样能注意语言表达的得体性：正式与非正式文体使用得当，语言表达符合特定的文化习惯等能注意语言交际的有效性：言之有物、内容充实，图形、表格等辅助手段的使用相得益彰设计效度辩论例析新课标阅读培养目标（8级）能识别不同文体的特征能通过分析句子结构理解难句和长句能理解阅读材料中不同的观点和态度能根据学习任务的需要从多种媒体中获取信息并进行加工处理能在教师的帮助下欣赏英语文学作品除教材外，课外阅读量应累计达到30万词以上高考阅读理解的内容及要求理解语篇和段落主旨大意理解文中具体信息根据上下文提供的语境推测生词词义作出简单的判断和推理理解文段的基本逻辑结构理解作者的观点、意图和态度识别不同的文体特征理解文段的文化信息考试内容和考核目标的描述，是否清晰、详尽且具有可操作性？语言能力的“能做”描述考试内容与考核目标层级分类质量：准确性、丰富性、连贯性、适切性数量：词、句、段、衔接手段正确率：正确/总计速度：词/分钟记忆准确性使用熟练程度归纳概括题示例5.

Whatisthemandoing?A.Gettingdressed. B.Havinganinterview. C.Celebratingabirthday.〖考试内容〗语段大意

〖考核目标〗归纳概括〖答案〗A 〖得分率〗49.04% 〖区分度〗0.56M:Idon’tknowwhattoweartoday,dear.W:Whydoyoucaresomuchaboutyourclothestoday?M:I’mgoingtohaveanimportantinterview.W:Well,I’msureyouwilldowell,dear.M:Thanks.Doyoulikethissuit?W:Yes.Youlookverysmartinthatblueone.M:Howaboutthetie?Doyouthinkthiswillmatch?W:No,notreally.Whydon’tyouwearyournewone?M:Whichone?W:Theonethekidsgaveyouforyourbirthday.M:Thatone.Iwillgetit.间接辨别题示例11.

WhichofthefollowingdoesthewomanlikebestaboutWeybridge?A.Itsscenery. B.Itspeople. C.Itsfacilities.〖考试内容〗显性细节

〖考核目标〗间接辨别〖答案〗C 〖得分率〗61.95% 〖区分度〗0.52

“ThegreatestthingaboutWeybridgeisthefacilities”

简单推断题示例12.

Whatdoesthemando?A.Ateacher. B.Ahost. C.Atourguide.〖考试内容〗隐性细节

〖考核目标〗简单推断〖答案〗B 〖得分率〗63.00% 〖区分度〗0.43M:Welcometoourtalkshow,Barbra.Please,makeyourselfathome.First,couldyoupleasetellmesomethingaboutwhereyoulive?W:Yes.IwasborninFrance,butIgrewupinSwitzerlandandI’verecentlymovedtotheUK.NowIliveinWeybridge.M:Whatsortofplaceisthat?W:It’salargebusyplacewithbeautifulscenery.It’snearLondon.Ithasgotlotsofpeopleandhouses.It’stypicalofLondonsuburb.M:Isthereanythingyoulikebestaboutit?W:Thegreatestthingabout