TEM4阅读理解测试内容效度分析

1、论文导读：提升阅读理解水平是实现教学目的的重要方面. 从上面的分类可以看出内容效度是内部效度的一种.关键词：英语专业四级测试,阅读理解,内容效度1 .引言高校英语专业四级测试(TEM4是国内专为英语专业学生基 础阶段实施的大规模标准化语言测试.自1990年中国实施该项测试以来,TEM已经成为衡量英语专业教与学的重要标准. 近年来,由于其科学的命题方法、标准的评分标准、有力的 政策保证,TEM勺影响力逐步增加,现已逐渐向国际标准靠拢, 同时在国内的认可度也很高.因此,对于 TE游试的开展给 予更多的关注是必要的.阅读作为一项重要的语言学习技能,对于英语教与学(包括 英语专业及非英语专业)极其重要

2、.在英语教学中英语专业 四级测试,提升阅读理解水平是实现教学目的的重要方面. 与此同时,阅读理解作为习得语言的重要途径一直都是非常 重要的.随着科学技术的开展以及世界通用语(global language)的进步,在中国,第二语言阅读水平亟待提升.Bachman & Palmer118 指出“信度(reliability )和效度 (validity )是语言测试的两大重要指标.语言测试的信度通常很容易通过统计分析得出,由于它相对稳定；然而效度 却比信度复杂得多.Hughes222对效度作了如下定义：“效 度是指测试者(tester )能测试所希望测试到的东西的程度, 李筱菊3也同意这

3、一看法.Alderson, Clapham & Wall4 使用了内部效度(internal validity )和外部效度(externalvalidity )来描述不同类型的效度中国论文网.内部效度包括外表效度(face validity )、内容效度(content validity )和答复的有效性(response validity );而外部 效度那么由共时效度(concurrent validity )和预测效度(predictivevalidity )组成4171.从上面的分类可以看出内容效度是内部效度的一种.内容效度是指“测试是否能足够代表或者说在多大程度上代表了所要

4、测试的内容 594.Bachman6指出内容效度通常 包括内容相关度(content relevance )和内容覆盖度(content coverage)两方面.内容效度是语言教学与学习的重要方面, Hughes227称“测试的内容效度越高,该测试就越有可能准 确地测试所要测试的内容.一种用来测试内容效度比拟常用 的方法就是把测试与有关测试内容的说明进行比照,这些内 容说明包括测试大纲、教学大纲或是特定学科领域的具体说 明4.考虑到TEM4勺重要性以及阅读理解水平在英语学习中承当的 重要角色,有必要对于阅读理解测试局部的开展情况给予更 多的关注并进行相应的评估.本研究旨在对 2021年的TE

5、M4 阅读理解局部的内容效度进行研究,同时针对命题中反映出的问题提出了建议,以期对于提升试题质量有所帮助.2 .TEM4阅读理解测试内容效度分析本文以Bachman& Palmer1提出的任务特性Task Characteristics 为理论依据,结合?高校英语专业四级考 试大纲2004年新版» 7以下简称?大纲?对2021年 的TEM4用读理解局部的内容效度进行研究.然而将任务特性这一理论应用于阅读测试时存在着一定的缺乏,正如Bachman & Palmer1所说的他们并没有打算规定测试任务的特定类型 以及任务特性.因此,考虑到阅读测试的特性,本文以下的 分析将从

6、任务特性框架中的“输入特性"Characteristics of the Input 和“预期答复特性" Characteristicsof the Expected Response两个角度进行.2.1 输入特性Bachman8125指出“输入是指期望应试者答复的特定测试任 务中隐含的信息.输入特性包括长度、速度、生词、易读度、 题材以及体裁8.为了便于讨论分析英语专业四级测试,本 文将这六局部分成以下三类：阅读速度长度和速度、语言 难度生词和易读度和语篇类型题材和体裁.2.1.1 阅读速度 几乎所有的测试者都会考虑的问题就是阅读理解的测试长度怎样才是合理的.杨惠中&am

7、p; Weir9提出“试卷的设计者要 考虑受试者做阅读理解题的实际情况,即既要阅读文章又要 答复下列问题或作出选择,因此对于阅读文章和做题要作出适当 比例的区分.?大纲?对TEM4用读理解有如下要求：“既要 求准确性,也要求一定的速度.阅读材料共长 1800个单词左 右,测试时间25分钟.阅读速度为每分钟120个单词.本 文经过仔细的计算得出TEM42021悯读理解局部的文章总字 数、问题字数及指令字数,同时结合大纲要求,阅读速度也 计算出来.见下表表2.1 TEM4 2021阅读长度及阅读速度从表2.1可以看出,文章材料总字数是1843,根本符合?大 纲?对于阅读材料的字数要求.此外,阅读速

8、度由阅读局部 总长度除以规定的时间得出为106词每分,这一速度与?大 纲?对于阅读速度的规定有一定差距,但是这样可以保证受 试者有足够的时间答复下列问题.总的来看,阅读速度长度和 速度与大纲的规定根本一致,但还有很大的提升空间.2.1.2 语言难度对于语言难度,?大纲?规定“阅读材料的语言难度中等,关 键词汇根本上不超出?大纲?规定的范围.实际上,这里涉 及的是生词以及易读度的问题中国论文网.易读度指英语文本易于阅读和理解的程度或性质, 是应用语言学的重要概念 易读度通常被认为是篇章结构与词汇难度的结合英语专业四 级测试,主要受语言形式(如句子长度、生词等)的影响.既然生词时影响易读度的重要因

9、素之一,本节试图分析TEM4(2021)阅读理解局部各篇文章的易读度,从而解读阅读部分的语言难易程度.前人对于易读度的研究已经付出了很多 努力,提出了许多计算易读度的方式,如SMO蜡数,Fry文章难度测试公式,Flesh易读度测试公式等.这些方法的共同 目的都是试图为测试文章难易程度提供简单易操作的方式.在众多方法中,由Flesh10于1948年提出使用的易读度公 式至今仍在测试领域中频繁使用.鉴于此,本文采用 Flesh 公式对阅读理解的易读度进行计算分析.该公式如下：RE=206.835 (0.846 X NSYLL)- (1.015 X W/S),其中 REg示 易读度,NSYL里每10

10、0个单词的音节数,W/S每个句子的平 均单词数.经过计算,TEM4(2021)阅读理解局部各篇文章 的易读度如下：表2.2 TEM4 (2021)阅读理解易读度表 2.3 易读度参考量表(Reference table of readability )表2.2说明TEM4(2021悯读理解中各篇文章的易读度都在 50 到80之间,结合表2.3的易读度参考量表可以看出四篇文章中有一篇偏难一篇偏易,两篇适中,平均值也在标准值之间,易读度在50到80之间的操本族语者的成年人占了 40呢U 80% 对于易读度,杨惠中& Weir9认为易读度公式的设计是用 于测试持本族语者的而非外国人的阅读水平

11、英语专业四级考试,但是可以作为外语测试者命题的统一参考标准.因此,通过上面对易读度的分析,TEM4(2021)阅读理解中大局部文 章难度适中,根本符合?大纲?要求.2.1.3 语篇类型对于选材原那么,?大纲?明确规定：“题材广泛,包括社会、 科技、文化、经济、日常知识、人物传记等；体裁多样,包括记叙文、描写文、说明文、议论文、广告、说明书、图表等.在Alderson11看来,“好的阅读测试应该能够通过考察受试者不同的题材来评估他们的理解水平" .Weir1267 也指出“理想状态下应该从适宜的体裁中选择具体的话题,同时对于这些题材的选择不能存在文化偏见.对于TEM4 (2021)阅读

12、理解题材与体裁分析如下：表2.4 TEM4(2021)阅读理解题材与体裁从上面可以看出大局部文章的题材属于社会文化范畴,包括 社会生活、日常生活等,而体裁也主要集中在说明文和记叙 文两类.因此,这样的分布也是符合大纲的要求的,但是题 材和体裁的覆盖范围过窄,像经济、人物传记等题材没有涉 及,同时体裁方面也没有议论文、描写文等.因此,在以后 的测试中题材及体裁应该呈现多样性,这样才更有利于英语 的教与学.2.2 预期答复特性预期答复是由指示、任务以及所提供的输入共同作用下的而 产生的语言使用或作出反响的测试.预期答复特性主要从回 答类型(response types )和阅读技能两方面进行分析.

13、2.2.1 答复类型答复类型主要包括选择性答复(selected response )、有限 生成答复(lim让edproduction response )以及扩展性生成 答复(extended production response ). 多项选择题(multiple-choice questions , MCQ 形式作为一种选择性 答复类型英语专业四级测试,广泛用于各类测试中的阅读部 分,如CET4, CET6, TEM将.?大纲?也规定了 TEM4用读采 用的是多项选择题形式.由于答案的客观性,多项选择题可 以通过机器阅卷,从而保证了评分的快速、客观、准确.此 外,一系列的统计工具可以

14、用于工程分析(item analysis )、 测试分析、分数等值(score equating )、特定工程题库(item banking of selected response items ) 等； 这一类型的测 试可以很容易的进行预备测试13.然而在测试受试者阅读 水平时,多项选择题也具有一定的缺陷中国论文网.正如 Weir1344所说,“答复多项选择题本身就是一项不切实际的 任务,由于在现实生活中不会给出几个选择项去从中作出选 择.止匕外,多项选择题的形式可以通过猜想来做题,受试者 单纯地评猜想也有25%勺正确率.对TEM4 (2021)阅读理解的仔细研究说明所有的题目都是采 用的多

15、项选择题的形式.出于对阅读理解效度方面的考虑, 本文建议测试者在命制此类测试时应更加细心.2.2.2 阅读技能Alderson11指出阅读理解需要合理的调配阅读技能、水平 和策略.?大纲?规定了如下六项阅读技能：02能根据所读材料进行判断和推理03能掌握所读材料的主旨大意04能够理解05能够通过上下文推断个别生词短语的意思06理解上下文的逻辑关系,把握文章整体结构结合上面的六种阅读技能,下表列出了 TEM42021)阅读理解 中这六项技能的分布(为了方便,表中使用上面技能的标号 代表各技能)：表2.5 TEM4 (2021)阅读理解阅读技能 对于不同技能的考察在阅读测试中尤其重要,TEM也不例

16、外.TEM4 2021阅读理解局部考察了六项技能中的大局部技能, 这与?大纲?的要求是一致的英语专业四级测试,但是不同 技能考察的比重是不一样的.对技能 01和02的考察占了整 个局部的75%这也成为了考察的重点,也就是说理解字面意 思以及对文章的判断推理对整体分数有很大的影响.表2.5还说明对技能03、04、05的考察所占比重较小,实际上,理 解3.结语本文以Bachman& Palmer1提出的任务特性为理论依据,结 合?大纲?对2021年的TEM4用读理解局部的摘要尽量丰富 题材和体裁.上面的研究分析见 2.1.3 说明TEM4M试中 题材和体裁范围有限,因此更多的题材和体裁可以

17、应用于测 试当中,尤其是近几年来一直没有涉及过的语篇类型题材和体裁.综上所述,本文的分析在某种程度上说明了TEM4阅读理解局部内容效度情况,希望以上的建议对以后的英语 专业教学以及测试有所帮助.参考文献1Bachman,L.F.& A.S.Palmer.Language Testing inPracticeM.Shanghai:Shanghai Foreign LanguageEducation Press,1999.2Hughes,A.Testing for LanguageTeachersM.Cambridge:CambridgeUniversity Press,1989.3李筱菊

18、.语言测试科学与艺术M.长沙：湖南教育出版社, 1997.4Alderson,J.C.,C.Clapham & D.Wall.Language TestingConstruction and EvaluationM.Beijing: Foreign Language Teaching andResearch Press,2000.5Henning,G.A Guide to LanguageTesting:Development,Evaluation andResearchM. Beijing:Foreign Language Teaching and Research Press,2001.6Bachman,L.F.Fundamental Considerations in LanguageTestingM.Oxford: Oxford University Press,1990.7高校英语