（英语语言文学专业论文）大学英语四级考试中阅读理解测试题型对比浅析.pdf

论文摘要 长期以来，以多项选择为主的试卷的测试效度问题，引起学术圈内的热烈讨 论。而像大学英语四级考试这样规模较大，影响较深的考试的测试效度，更是讨 论的焦点。2 0 0 4 年3 月开始的大学英语四级考试改革中对多项选择测试题型的 适当使用做了强调。由于阅读理解能力是大多数中国学生在学习或者今后工作中 必须掌握的语言技能，所以本文作者将研究重点放在阅读理解方面，希望通过研 究判断多项选择是否能有效测试被测者的阅读理解能力。具体说来，作者试图通 过实验研究解决这两个问题：( 1 ) 如果在一套试卷中使用包括多项选择题型在内 的多种题型来测试大学英语考试大纲中规定的语言能力，试卷的效度会不会提 高? ( 2 ) 短文闯答，翻译，多项选择以及完型填空这四种手段在测试某一能力 的时候，是不是某一测试手段较其他题型更有效度? 本文分别定性定量对完型填空、短文问答、多项选择和翻译这四种测试题型 的表面效度和结构效度进行了探讨。作者针对1 8 7 名大学一年级学生设计了四套 试卷和两套调查问卷以获得相关信息，并使用了s p s s l l 统计工具做相关分析。 研究结果表明短文问答和翻译在测试学生的信息获取能力方面有较高的表面效 度和结构效度。而完型填空在阅读文章较长的情况下能测试学生的归纳能力。多 项选择的优势在于能够判断被测者辨别能力。这些发现都证明一个有效的阅读测 试应该是综合题型的体现。文章结束部分，作者引申到阅读教学方面，提议在课 程中加入元认知论教学，并对今后该课题的研究方向做了补充。 关键词：效度，大学英语四级考试，短文问答，翻译，完型填空，多项选择 f o ry e a r st h ev a l i d i t yo ft e s t sw i t hm u l t i p l e - c h o i c eq u e s t i o n s ( m qa sam a j o r t e s t i n gt e c h n i q u eh a sc a u s e dh e a t e dd i s c u s s i o ni na c a d e m i cc i r c l e s ，e s p e c i a l l yw h e ni t c o m e st ol a r g e s c a l e ，h i g h s t a k et e s ts u c ha sc o l l e g e e n g l i s ht e s t ，b a n df o u r ( c e t 4 ) ， w h o s er e f o r m a t i o nc o m m e n c i n gf r o mm a r c h2 0 0 4u n d e r l i n e dt h ei m p o r t a n c eo f a p p r o p r i a t eu s e o fm c a sr e a d i n gc o m p r e h e n s i o ni st h ea b i l i t ym o s tc h i n e s es t u d e n t s s h o u l da c q u i r ef o r t h es a k eo ft h e i rw o r ko rs t u d y , t h ea u t h o rf o c u s e dt h er e s e a r c ho n r e a d i n gc o m p r e h e n s i o nt ot r yt of i n do u tw h e t h e rm c i sav a l i dm e a n st ot e s ts t u d e n t s r e a d i n ga b i f i t y t ob em o r es p e c i f i c , t h ea u t h o rh o p et os e a r c ho u tt h ea n s w e r st ot h e f o l l o w i n gq u e s t i o n ：( 1 ) w i l lat e s th a v eah i g h e rv a l i d i t yi fw eu s em o r et h a no n e t e s t i n gt e c h n i q u el i k em ct om e a s u r et h er e a d i n gs u b s k i l l sl i s t e di nt h ec e t4 s y l l a b u si nas i n g l et e s t ? ( 2 ) i nt e s t i n gc e r t a i ns u b s k i l l s ，w i l lo n eo ft h et e s t i n g t e c h n i q u e s ，i e s a q ，t r ，m ca n dc l o z e ，b em o r ee f f e c t i v et h a nt h eo t h e r s ? b o t hq u a l i t a t i v ea n dq u a n t i t a t i v es t u d i e sa r ee m p l o y e dt ot e s tf a c ev a l i d i t ya n d c o n s t r u c t i v ev a l i d i t yo ft h o s ef o u rt e s t i n gt e c h n i q u e sl i s t e da b o v e f o rt h ep u r p o s eo f t h i s ，a ne x p e r i m e n tw a sc a r r i e do u ta m o n g1 8 7s o p h o m o r es t u d e n t sw i t ht h eh e l po f t h ef o l l o w i n gi n s t r u m e n t s ：f o u rr e a d i n gc o m p r e h e n s i o nt e s t s ，t w oq u e s t i o n n a i r e sf o r g a t h e r i n gi n f o r m a t i o n ，a n ds p s s 一1 1t od i go u tt h ec o r r e l a t i o nc o e f f i c i e n tb e t w e e n t e s t i n gt e c h n i q u e s t h er e s e a r c hf i n d i n g ss h o wt h a ta m o n gt h ef o u rt e s t i n gt e c h n i q u e s u n d e rd i s c u s s i o n ，s a qa n dt re n j o yh i g h e rf a c ev a l i da n dc o n s t r u c t i v ev a l i d i t yi n t e s t i n gt h es k i l lo fg a t h e r i n gs p e c i f i ci n f o r m a t i o n t h es t a t i s t i c sa n a l y s i sa n ds u b j e c t s r e s p o n d st ot h eq u e s t i o n n a i r e sa l s oi n d i c a t et h a tc l o z et e s ti sv a l i di nc h e c k i n g s t u d e n t s s u m m a r i z i n ga b i l i t yp r o v i d e dt h et e x ti sl o n ge n o u g h ；a n dm c i sg o o da t a s s e s s i n gc a n d i d a t e s a b i l i t yt od i s t i n g u i s hg e n e r a li n f o r m a t i o nf r o mt h es p e c i f i co n e ， o rd e c i d et h er e l e v a n ti m p o r t a n c eo fa r g u m e n t s a l lt h e s ef i n d i n g sl e a dt oas a f e c o n c l u s i o nt h a ta l la p p r o p r i a t ea n dv a l i dr e a d i n gc o m p r e h e n s i o nt e s ts h o u l di n c l u d e m o r et h a no n et e s t i n gt e c h n i q u ef o ra s s e s s i n gs t u d e n t s c o m p r e h e n s i o na b i l i t i e s t o c o n c l u d et h et h e s i s ，t h ea u t h o rs u g g e s t si n c o r p o r a t i n gm e t a c o g u i t i o nt r a i n i n gi n t o r e a d i n gc o u r s e ，a n dp r o p o s e sf a r t h e rr e s e a r c ho b j e c t i v e sa sw e l l k e yw o r d s ：v a l i d i t y , c e t4 ，s h o r ta n s w e rq u e s t i o n s , m u l t i p l e c h o i c eq u e s t i o n s , t r a n s l a t i o n ，o o z e l i s to f1 a b l e s t a b l e4 1p e r s o n a lo p i n i o n so fs u b j e c t st o w a r d sm c ，s a qa n dt ro nf a c ev a l i d i t y 。3 】【 t a b l e 4 2 c o m p a r i s o n o f d i f f i c u l t y l e v e l b e t w e e n m c t r 3 6 t a b l e 4 3 c o m p a r i s o n o f d i f f i c u l t y l e v e l b e t w e e n s a q & t r 3 7 t a b l e4 4c o m p a r i s o no fd i f f i c u l t yl e v e lb e t w e e nc l o z e t r 3 8 t a b l e4 5i e l t sd i f f i c u l t yl e v e l 3 9 t a b l e4 6s a q & t rc o r r e l a t i o n s 4 0 t a b l e4 7s a q t rc o r r e l a t i o n si f t h ec a n d i d a t e sa l eb o y s 一4 1 t a b l e4 8s a q t rc o r r e l a t i o n sf f t h ec a n d i d a t e sa l eg i r l s 4 1 t a b l e4 9s a q & t rc o e f f i c i e n ti nt h ec a s eo fq u e s t i o nf o rd e t a i l s 4 1 t a b l e4 1 0s a q t rc o e f f i c i e n ti nt h ec a s eo fq u e s t i o nf o rd e t a i l si fc a n d i d a t e sa r e b o y s 4 2 t a b l e4 1 1s a q & t rc o e f f i c i e n ti nt h ec a s eo fq u e s t i o nf o rd e t a i l si fc a n d i d a t e sa r e 百r l s 。4 2 t a b l e 4 1 2 s a q & t r c o e f f i c i e n t i n t h ec a s e o f i n f e r e n c eq u e s t i o n s 4 2 t a b l e4 1 3s a q & t rc o e f f i c i e n ti nt h ec a s eo fi n f e r e n c eq u e s t i o ni fc a n d i d a t e sa r e b o y s z 1 2 t a b l e4 1 4s a q & t rc o e f f i c i e n ti nt h ec a s eo fi n f e r e n c eq u e s t i o ni fc a n d i d a t e sa r e g i r i s z 1 3 t a b l e 4 1 5m c a n d t r c o r l e l a t i o n s ，z 1 3 t a b l e 4 1 6 m c t r c o r r e l a t i o n s i f t h e c a n d i d a t e s a r e b o y s 。4 4 t a b l e 4 1 7 m c t r c o r r e l a t i o n s i f t h ec a n d i d a t e s a l e g i r l s 4 4 t a b l e4 1 8m c & t rc o e f f i c i e n ti nt h ec 3 s eo fq u e s t i o nf o rd e t a i l s 4 4 t a b l e4 1 9m c & t rc o e f f i c i e n ti nt h ec a s eo fq u e s t i o nf o rd e t a i l si fc a n d i d a t e sa r e b o y s z “ t a b l e4 2 0m c & t rc o e f f i c i e n ti nt h ec a s eo fq u e s t i o nf o rd e t a i l si fc a n d i d a t e sa r e 百d s 4 5 t a b l e4 2 1m c & t rc o e f f i c i e n ti nt h ec a s eo fi n f e r e n c eq u e s t i o n s 4 5 t a b l e4 2 2m c & t rc o e f f i c i e n ti nt h ec a s eo fi n f e r e n c eq u e s t i o n si fc a n d i d a t e sa r e b o y s 4 5 t a b l e4 2 3m c & t rc o e f f i c i e n ti nt h ec a s eo fi n f e r e n c eq u e s t i o n si fc a n d i d a t e sa r c g i r l s - 4 5 t a b l e4 2 4c l o z ea n dt rc o r r e l a t i o n s 4 6 学位论文独创性声明 本人所呈交的学位论文是我在导师的指导下进行的研究x - 作及 取得的研究成果据我所知，除文中已经注明引用的内容外，本论文 不包含其他个人已经发表或撰写过的研究成果对本文的研究做出重 要贡献的个人和集体，均已在文中作了明确说明并表示谢意 作者签名：邋日期：立：壶：2 ， 学位论文授权使用声明 本人完全了解华东师范大学有关保留，使用学位论文的规定，学 校有权保留学位论文并向国家主管部门或其指定机构送交论文的电 子版和纸质版有权将学位论文用于非赢利目的的少量复制并允许论 文进入学校图书馆被查阅有权将学位论文的内容编入有关数据库进 行检索有权将学位论文的标题和摘要汇编出版保密的学位论文在 解密后适用本规定 导师签名：以净立手 j 日期：旦型兰： a c k n o w l e d g e m e n t s 1w i s ht ot h a n km ys u p e r v i s o r , p r o f s h uy u n x i a n g , f o ri n t r o d u c i n gm et ot h e w o r l do ft e s t i n ga n df o rh i sg u i d a n c ea n da s s i s t a n c ew i t ht h i ss t u d y w i t h o u th i s s t i m u l a t i n gi n s t r u c t i o n s ，v a l u a b l es u g g e s t i o n sa n dc o n s t a n te n c o u r a g e m e n t ，m yt h e s i s w o d dn o tt a k ei t sp r e s e n tf o r m 1w o u l da l s ol i k et ot h a n ks u n k u n ，m yc l a s s m a t e ，f o rh i sg r e a th e l pd u r i n gt h e c o l l e c t i o no ft h ed a t ad e s p i t eh i sb u s ys c h e d u l ea ts c h 0 0 1 s p e c i a lt h a n k sa l s og ot o1 8 7s t u d e n t sf r o me a s tc h i n ap o l i t i c a la n dl a w u n i v e r s i t yw h ov o l u n t e e r e dt ot a k ep a r t i nt h ee x p e r i m e n t sa sw e l la st e a c h e r s ， w i t h o u tw h o s ep a r t i c i p a t i o nt h i ss t u d yw o u l dn o th a v e b e e nc o m p l e t e d f i n a l l y , 1w l dl i k et oe x p r e s sm yg r a t i t u d et oa l lt h o s ew h oh a v eb e e n “f r i e n d i nn e e d ”，m yc o l l e a g u e sa n dt h es t a f ff r o mt h el i n g u i s t i c sd e p a r t m e n t m yg r a t i t u d e a l s og o e st om y f a m i l ya n df r i e n d si ns h a n g h a ia n dn a n j i n gw h o h a v ea l w a y sb e e ns o s u p p o r t i v ea n du n d e r s t a n d i n g i n t r o d u c t i o n 0 1b a c k g r o u n d f o rt h ep a s s i n gd e c a d e s ，t h ew h o l es o c i e t y sc o m m i t m e n tt ot e s t b a s e d a c c o u n t a b i l i t yh a se n s u r e dt h a tt e s t i n gw i l lr e m a i nac e n t r a li s s u ei ne d u c a t i o nf o r t h e f o r e s e e a b l ef u t u r e t e s t ss u c ha sc e t4 ( c o l l e g ee n g l i s ht e s tb a n df o u 0o rc e t6 i n v o l v et h eh i g h e s tp o s s i b l es t a k e si nu n i v e r s i t ye d u c a t i o nb e c a u s et h e yc a nl i m i t s u b s e q u e n te c o n o m i co p p o r t u n i t i e sf o r t h o s es t u d e n t sw h of a i lt h e m m o s tc o m p a n i e s o re n t e r p r i s e s ，e s p e c i a l l yt h o s em u l t i n a t i o n a lc o r p o r a t i o n s ，r e q u i r eac e tc e r t i f i c a t e b e f o r et h ef i r s ti n t e r v i e w t h es t a k e sw e r ee v e nh i g h e rs i n c et h ea c q u i s i t i o no ft h e c o r r e s p o n d i n gc e r t i f i c a t ew a so n e o ft h er e q u i s i t e sf o rd i p l o m a t os o m ee x t e n ti ti sa m a t t e ro fs u r v i v a lf o rs o m es c h o o l sa n dt e a c h e r st op r o v i d et h en e c e s s a r yi n s t r u c t i o n a l s u p p o r tt oi m p r o v es t u d e n t s o v e r a l lp e r f o r m a n c e a sm e a s u r e db ys u c ht e s t s c e t 4w a sf i r s tl a u n c h e di ns e p t e m b e r1 9 8 7a n dt h e r ew e r ea b o u tah u n d r e d t h o u s a n dc a n d i d a t e s t i l l2 0 0 4 ，t h ep a r t i c i p a n tn u m b e rh a ss k y r o c k e t e dt oe l e v e n m i l l i o n ，ah u n d r e dt i m e st h a to ft h ey e a r1 9 8 7 a1 7 一y e a rs t a b l ed e v e l o p m e n th a s m a d ei te v i d e n tt h a tc e t4h a sm e ts o c i a ld e m a n da n di sw i d e l ya c c e p t e dt w uq i d i ， 2 0 0 5 ) h o w e v e r ，a n yh i g h - s t a k es t a n d a r d i z e dt e s t i n gi sl i m i t e di nw h a ti t o f f e r s t e a c h e r sa n ds t u d e n t s m o r e o v e r , i th a sac o n s i s t e n t l yd e t r i m e n t a li m p a c to nt e a c h i n g a n dl e a r n i n gi nt h ec l a s s r o o m s t a n d a r d i z e dc o m m e r c i a lt e s t sp r o v i d en a r r o wd a t ao l l s t u d e n t s a b i l i t ya n dl e a r n i n ga n dd i s t o r t e dd a t ao ns c h o o la n ds t a t e w i d ee d u c a t i o n q u a l i t y ( p a u l ，2 0 0 4 ) o nt h eo t h e rh a n d , t h es p r e a do fe n g l i s ha n di t sd i f f u s i o n t h r o u g h o u tt h em o d e mw o r l dh a sm a d ee n g l i s hl a n g u a g et e s t i n gab i gb u s i n e s s a n d b i gb u s i n e s s ，i ti sc l e a r , h a si t so n l yl o g i ca n dr u l e s ，q u i t ed i s t i n c tf r o mt h el o g i ca n d r o l e so fa na c a d e m i cf i e l dl i k el a n g u a g et e s t i n g p r e s s u r e sa s s o c i a t e dw i t ht h e s et e s t s o f t e nr e s u l ti nm a n yt e a c h e r ss q u e e z i n gs o m ec u r r i c u l u mt i m et op r e p a r es t u d e n t sf o r t h en e wt e s tw i t hc o n t e n to ft h ep a s t h i g hs t a k e st e s t i n gc a nb e c o m et h er a t i o n a l ef o r a l lt h a ti sd o n ei nc l a s s r o o m sa n dp e r m e a t e st e a c h e r s o w na s s e s s m e n ti n t e r a c t i o n s i t h a sb e e ne f f e c t i v e l yd e m o n s t r a t e dt h a tr i s e si nt e s ts c o r e sa r el i k e l yd u et oi n c r e a s ei n t e s t - t a k i n gb e h a v i o ra n d t os c h o o l sa n dt e a c h e r sg e t t i n gs m a r t e ra tp r e p a r i n gs t u d e n t s 1 f o rt h et e s t s ( l e es m i t h ，1 9 9 0 ) f u r t h e r , t h eu s eo ft e s ts c o r e sa n de x a m i n a t i o n sf o r p u i p l o s c st h a ta f f e c tt h es t a t u so rf u t u r eo fs t u d e n t s ，t e a c h e r so rs c h o o l sr e s u l t si n t e a c h e r sf o c u s i n gt e a c h i n go nt h et e s tc o n t e n t ，t r a i n i n gs t u d e n t si nh o wt op a s st h e t e s t s a n da d o p t i n gt e a c h i n gs t y l e st h a td on o tm a t c ht h ep r e f e r r e dl e a r n i n gs t y l eo f m a n ys t u d e n t s a l lo ft h e s e , u n f o r t u n a t e l y , 姗c o n t r a r yt ot h ep u r p o s eo fc o l l e g e e n g l i s he d u c a t i o n 0 。2p u r p o s e sf o rt h i sp a p e r 0 2 1c u r r e n tp r o b l e m u s i n g t e s t st os o l v ee d u c a t i o n a lp r o b l e m si sas i m p l i s t i ca p p r o a c ht oa c o m p l e x p r o b l e m ( s h o h a m y , 1 9 9 3 ) t h u sc o m e st h e r e f o r mp r o p o s e di nm a r c h2 0 0 4 , u n d e r l i n i n gt h ei m p o r t a n c eo fd e c r e a s i n gt h ep e r c e n t a g eo fm u l t i p l e - c h o i c eq u e s t i o n s ( m c ) t h i sp r o p o s a li s w e l lw e l c o m e d m ci sn ol o n g e re m p l o y e di np u b l i c e x a m i n a t i o n si nb r i t a i n , a n de v e l ii nc o u n t r i e sw i t hi n f m i t e l yg r e a t e rn u m b e r so f c a n d i d a t e sa n dl o g i s t i c a lp r o b l e m s ，e g h e r ei nc h i n a , t h e r ei sav e r ys t r o n gd e s i r et o m o v et o w a r d sm o r ea c c e p t a b l ea n dv a l i dm e t h o d so fa s s e s s i n gl a n g u a g ea b i l i t y t h o u g hi t i se a s i e ra n dm o r et i m e s a v i n gm a r k i n gm c ，t h ed e f i c i e n c yp e rs i i s b e c o m i n gm o r ea n dm o r eo b v i o u sa n di n v i t e sl o t so fc r i t i c i s mf r o ml i n g u i s t sa n d e d u c a t o r s ( w h i c ht h ea u t h o rw i l ld i s c u s si nd e t a i ll a t e 0 t h em o s td i s c u s s e dp r o b l e m i st h a ts t u d e n t su n d e rt i m ep r e s s u r et o w a r d st h ee n do fat e s tg i v eu pt r y i n gt oc h o o s e t h ec o r r e c ta n s w e ra n da d o p tas t r a t e g yo fa r b i t r a r yg u e s s i n gb yp i c k i n gas i n g l e a n s w e rp o s i t i o nt om a r kf o rt h er e s to ft h et e s t i ft h a ti sc o l y n n o n t h e nw h a tp r o f e s s o r y a n gh u i z h o n gd e c l a r e di nh i sr e s e a r c ht h a ta f t e rn e a r l y2 0 一y e a re f f o r t , t h er e a d i n g a b i l i t yo fc h i n e s ec o l l e g es t u d e n t sh a v er e m a r k a b l yi m p r o v e di si n e l o q u e n t t h e s t a t i s t i c sr e c o r d e df r o mt h ef i r s tf i v e - y e a r ( 1 9 8 7 1 9 9 1 ) ，t ot h et h i r df i v e - y e a r ( 1 9 9 2 0 0 1 ) ，i n d i c a t i n gt h a tt h ea v e r a g es c o r eo fr e a d i n gc o m p r e h e n s i o nh a v eb e e n i n c r e a s e db y2 5p o i n t s ，i su n c o n v i n c i n g ( a n dr i d i c u l o u s ) i nt h i sc i r c u m s t a n c e ，t h et e s t r e s u l ti sm e a n i n g l e s s n et e s td e s i g ns h o u l da i ma te v a l u a t i n gl a n g u a g el e a r n e r s c o m m u n i c a t i v ec o m p e t e n c e ，i n s t e a do fs e t t i n gh u r d l e sa r t i f i c i a l l y at e s ts h o u l df a v o r e f f e c t st h a te n c o u r a g el e a r n e r st os t u d y ( h u g h e s ，1 9 8 9 ) a tp r e s e n t ，c e t4 ( a n d6 ) 2 i t e m sh a v ea l w a y sb e e nc e n t e r e do nm c ( aw a yw es e l d o mu s ei nd a i l yl i f et of i n do u t w h e t h e rw et m l yu n d e r s t a n dw h a tw eh a v er e a d ) , w i t hs h o r ta n s w e rq u e s t i o n s ( s a o ) a n dt r a n s l a t i o nf i r ) a ss u p p l e m e n t a r yt e s t i n gt e c h n i q u e s s u r e l yt h e r ea r eo t h e r t e s t i n gt e c h n i q u e su s e da sp r a c t i c i n ge x e r c i s e so ru s e di no t h e rl a r g e s c a l et e s ts u c ha s c l o z e ( t h es u m m a r yo ft h et e s t i n gp a s s a g ew i t hm i s s i n gi n f o r m a t i o n ) e t c y a n g h u i z h o n ga n dw e k ( 1 9 9 8 ) h a v ep o i n t e do u tt h a tw h e t h e rat e s ti sg o o d0 rn o ti s d e t e r m i n e db yt w of a c t o r s ，o n ei st h em a t e r i a ls e l e c t e d ，a n dt h eo t h e ri st h et e s ti t e m s d e s i g n e d , o fw h i c ht h ea u t h o rp i c k sl l pt h es e c o n da st h em a i np u r p o s eo ft h i se s s a y t os t u d yt h ev a l i d i t yo ft e s ti t e m ss u c h 硒s a o ，c l o z e ，m ca n dt ri nt e s t i n gt h e r e a d i n ga b i l i t ym a n d a t e di nc e t4s y l l a b u si nt e r m so ff a c ev a l i d i t ya n dc o n s t r u c t v a l i d i t y 0 2 2f o c u so ft h i sr e s e a r c h t h er e a s o nf o rt h ea u t h o rt oc h o o s er e a d i n ga sar e s e a r c ho b j c c fi sq u i t es i m p l e t h ed i r e c t i n gc o m m i t t e eo ff o r e i g nl a n g u a g et e a c h i n gf o rc o l l e g ee d u c a t i o nh a s l a u n c h e dan e ws y l l a b u sr e c e n t l y , a na c ta f t e rm u c hs u r v e ya n dr e s e