（外国语言学及应用语言学专业论文）关于cet6听力试卷的结构效度研究.pdf

摘要 大学英语考试是教育部主管的一项全国性的教学考试，其目的是对大学生的实际英 语能力进行客观、准确的测量，为大学英语教学提供服务。作为一项基本的语言技能， 听力理解比其他形式的语言技能更多地应用于日常生活当中。近年来，伴随着英语六级 听力试卷比重的增加，听力理解在外语教学中的作用被强调的也越来越多。一般认为， 一个好的测试必须要有效度。其中，结构效度决定对测试结果在多大程度上做出了正确 地解释。因此可以说，英语六级听力试卷结构效度的实现对整份英语六级试卷结构效度 的实现会产生重大影响。该研究通过英语六级听力策略问卷，听力模拟测试及口头陈述 的方式，从学生的英语六级听力策略，学生的考试成绩及试卷内容效度三方面收集资料， 并将数据输入s p s s i1 5 统计包进行数据分析，来验证英语六级听力试卷的结构效度是 否受到威胁，以及威胁的因素有那些。 参加了国家举行的2 0 0 8 年6 月2 1 日的英语六级考试的2 0 2 0 名被试来自河北师范 大学和石家庄邮电职业技术学院。其中的4 0 名被试参加了模拟测试，3 5 名被试( 5 名 被试所做的试卷无效) 当中又有6 名做了口述报告。 通过研究，得出了这样的结果：由于t e s t w i s e n 懿s 策略的过度使用会使英语六级听 力试卷的结构效度受到威胁。通过对听力试卷的内容分析，得出了主旨和细节型、推断 型和语言特征型的问题类型设置比例有悖于大纲要求，主旨和细节型的题目所占比例较 其他两种题型大；而且被试在完成这几种类型的题目时使用的策略类型没有显著差异。 由此可以说明目前英语六级听力试卷的结构效度在不同程度上存在着一定程度的威胁。 研究结果对英语教学的改进和测试有一定的启发作用。 关键词：结构效度因子分析及时追述测验技巧策略 v i a b s t r a c t a san a t i o n a lt e a c h i n gt e s t ，s u p e r i n t e n d e db yc h i n a sm i n i s t r yo fe d u c a t i o n ，c o l l e g e e n g l i s ht e s th a sb e e na l li m p o r t a n ts u p p l e m e n t a r ym e a s u r ef o rl e v e l - b a s e de n g l i s ht e a c h i n g i nc o l l e g ee n g l i s hc u r r i c u l u ms i n c et h ei n t r o d u c t i o no ft h er e f o r ma n do p e n i n gp o l i c y i t a i m st om e a s b r eu n i v e r s i t ys t u d e n t s e n g l i s ha c t u a lc a p a c i t yo b j e c t i v e l ya n da c c u r a t e l ya n d t h e ns e r v ec o l l e g ee n g l i s ht e a c h i n g l i s t e m n gi sa ne s s e n t i a ll a n g u a g es k i l l ，w h i c hi su s e df a r m o r et h a na n yo t h e rs i n g l el a n g u a g es k i l li nn o r m a ld a i l yl i f e ag o o dt e s ts h o u l dm e a s u r e w h a ti ti si n t e n d e dt oi t e a s s u r ea n dn o t h i n ge l s e i fat e s td o e st h i s ，i ti ss a i dt ob ev a l i d c o n s t r u c tv a l i d i t yi st h em o s ti m p o r t a n tp r o p e r t yo fat e s t ，a n dt h eg e n e r a lv i e wo fc o n s t r u c t v a l i d i t yi st h ee x t e n tt ow h i c ht h et e s tm e a s u r e st h en g l a tc o n s t r u c t s c o n t e n tv a l i d i t yi sa l s o c o n s i d e r e dv e r yi m p o r t a n t u pt on o w , t h el ct e s to fc e t - 6a c c o u n t sf o ra l a r g ep r o p o r t i o no f t h ew h o l et e s t t h ep r e s e n ts t u d ye x p l o r e st h ec o n s t r u c tv a l i d i t yo ft h el ct e s to fc e t 6f r o m t h ef o l l o w i n gt h r e ea s p e c t s ：1 ) t e s tt a k i n gp r o c e s s e so rs t r a t e g i e s ，2 ) t e s tp e r f o r m a n c e so r s c o r e s ，a n d3 ) t e s ti t e mc o n t e n t , w h i c ha r er e c e i v a b l ea n ds c i e n t i f i c p a r t i c i p a n t sf o rt h i sr e s e a r c hs u r v e ya r es t u d e n t si nh e b e in o r m a lu n i v e r s i t ya n d s h i j i a z h u a n gv o c a t i o n a lc o l l e g eo fp o s t sa n dt e l e c o m m u n i c a t i o n s ，w h oh a v ej u s tt a k e n c e t - 6 ，j u n e21 醴，2 0 0 8 t h ei n s t r u m e n t sa r et h ec e t - 6l i s t e n i n gc o m p r e h e n s i o ns t r a t e g y q u e s t i o n n a i r ea n dt h el ct e s tp a p e ro ft h ec e t - 6 2 2 0p a r t i c i p a n t s ，w i t hd i f f e r e n ta c a d e m i c b a c k g r o u n d s ，d ot h eq u e s t i o n n a i r e t h ed a t ao b t a i n e da r ea n a l y s i z e dw i t ht h ee f ai nt h es p s s 11 5d o c u m e n t s o ft h e2 2 0p a r t i c i p a n t s ，4 0p e r f o r mt h el ct e s t 6 ( s e l e c t e df r o m3 5t e s t t a k e r sw h o s es c o r e sa r ev a l i d ) a r et r a i n e dt og i v et h ev e r b a lr e p o r t s t h em a j o rf i n d i n g so ft h i ss t u d ya l e ：t h ee x c e s s i v eu s eo ft h et e s t w i s e n e s s ss t r a t e g i e s c a l ll e a dt ot h ef a i l u r eo fa c h i e v i n gt h eo b j e c t i v eo ft h et e s t s o ，i th a san e g a t i v ee f f e c to n a s s u r i n gt h ec o n s t r u c tv a l i d i t yo ft h el ct e s to ft h ec e t 一6 a c c o r d i n gt ot h ec o n t e n ta n a l y s i s ， i tc a nb es a i dt h a t ，d u et ot h el a r g e rc o v e r a g eo ft h eq u e s t i o nt y p eo fm a i ni d e aa n dd e t a i l s ， t h et h r e eq u e s t i o nt y p e s m a i ni d e aa n dd e t a i l s ，i n f e r e n c e ，a n ds p e c i f i cl a n g u a g ef e a t u r e s a r en o ta r r a n g e di nap r o p e rp r o p o r t i o n i nt e r m so ft h et e s tp e r f o r m a n c ea n a l y s i sa n dt h e i m m e d i a t er e t r o s p e c t i o nd a t aa n a l y s i s ，i ti sc e r t a i nt h a tw h e nl i s t e n e r sp e r f o r mq u e s t i o n so f t h et h r e ed i f f e r e n tt y p e s m a i ni d e aa n dd e t a i l s ，i n f e r e n c e ，a n ds p e c i f i cl a n g u a g ef e a t u r e s ， i v t h e r ei sn os i g n i f i c a n td i f f e r e n c eo fs t r a t e g yb s e t h ef i n d i n g so ft h i sr e s e a r c ha r ev a l u a b l ef o r t e s td e s i g n e r st oe s t i m a t ec o n s t r u c tv a l i d i t yf r o man e wp e r s p e c t i v e ，a n df o rc o l l e g et e a c h e r s t oi n s t r u c tt h es t u d e n t st oe m p l o yl a n g u a g eu s es t r a t e g i e si n s t e a do ft e s t w i s e n e s ss t r a t e g i e s k e yw o r d s ：c o n s t r u c tv a l i d i t ye x p l o r a t o r yf a c t o r ya n a l y s i s i m m e d i a t er e t r o s p e c t i o nt e s t - w i s e n e s ss t r a t e g i e s v 学位论文原创性声明 本入所提交的学位论文关于的c e t 一6 听力试卷的结构效度研究，是在导师的指 导下，独立进行研究工作所取得的原创性成果。除文中已经注明引用的内容外，本论文 不包含任何其他个人或集体已经发表或撰写过的研究成果。对本文的研究做出重要贡献 的个人和集体，均已在文中标明。 本声明的法律后果由本人承担。 论文作者( 签名) ：越般努 叫年月日 指导教师确认( 签名) ： 刎年6 月，日 学位论文版权使用授权书 本学位论文作者完全了解河北师范大学有权保留并向国家有关部门或机构送交学 位论文的复印件和磁盘，允许论文被查阅和借阅。本人授权河北师范大学可以将学位论 文的全部或部分内容编入有关数据库进行检索，可以采用影印、缩印或其它复制手段保 存、汇编学位论文。 ( 保密的学位论文在年解密后适用本授权书) 论文作者( 签名) ：起湘棼 指导教师( 签名) ： 勿。7 年石月e t 叫年月 1 1 筒m so ft h i sr e s e a r c h c h a p t e r1i n t r o d u c t i o n t h es t u d yi su n d e r t a k e nt oe x p l o r et h ec o n s t r u c tv a l i d i t yo ft h el i s t e n i n gc o m p r e h e n s i o n t e s to fc e t - 6b yi n v e s t i g a t i n gt h r e ea s p e c t so fi n f o r m a t i o n ，w h i c hc o n s i s to ft h ec o n t e n to f l i s t e n i n gc o m p r e h e n s i o nt e s t ，t h el i s t e n i n gp r o c e s s ，o rs t r a t e g i e so ft e s tt a k e r s ，a n dt e s tt a k e r s p e r f o r m a n c e so nt h o s ei t e m so rt h et e s ts c o r e s m o r e o v e r , t h i ss t u d yi sc a r r i e do u tt oe x a m i n e w h e t h e rt h el ct e s to fc e t - 6 咖p r e c i s e l ya n ds c i e n t i f i c a l l ym e a s u r es t u d e n t s l i s t e n i n g c o m p r e h e n s i o na b i l i t y a san a t i o n a lt e s t ，s u p e r i n t e n d e db yc h i n a sm i n i s t r yo fe d u c a t i o n , c o l l e g ee n g l i s ht e s t h a sb e e na l li m p o r t a n ts u p p l e m e n t a r ym e 8 霸】r ef o rl e v e l - b a s e de n g l i s ht e a c h i n gi nc o l l e g e e n g l i s hc u r r i c u l u ms i n c et h ei n t r o d u c t i o no ft h er e f o r ma n do p e n i n gp o l i c y c e t 0 6i sal a r g e s c a l es t a n d a r d i z e dt e s t , w h i c hi sac r i t e r i o n - r e l a t e dn o r m - r e f e r e n c e dt e s td e s i g n e dt om e e tt h e e d u c a t i o n a lm e a s u r e m e n tt h e o r y sd e m a n df o r t h el a r g e s c a l es t a n d a r d i z e dt e s t a n di ta i m st o m e a s u r eu n i v e r s i t ys t u d e n t s e n g l i s ha c t u a lc a p a c i t yo b j e c t i v e l ya n da c c u r a t e l ya n dt h e ns e r v e c o l l e g ee n g l i s ht e a c h i n g s o ，i tc a no f f e ral o to fd a t aw h i c hn o to n l yp r o v i d ed y n a m i c f o u n d a t i o nf o rt e a c h i n gm a n a g e m e n td e p a r t m e n t sa ta l ll e v e l st om a k ed e c i s i o n s ，b u ta l s o p r o v i d er e f e r e n c es t a n d a r df o re a c hu n i v e r s i t yt ot a k es t e p st oi m p r o v et h et e a c h i n gq u a l i t y a c c o r d i n gt oa c t u a lc i r c u m s t a n c e s t h e r e f o r e , p r o p e ri n t e r p r e t a t i o no ft h et e s ts c o r e sh a sg r e a t p e d a g o g i c a la n ds o c i a li m p l i c a t i o n s a c c o r d i n gt oc o l l e g ee n g l i s hc u r r i c u l u mr e q u i r e m e n t s ( f o rt r i a li m p l e m e n t a t i o n ) o f2 0 0 6 ，c e t - 6 ，t h el cp a r tc o v e r sn e a r l y35 o f t h et o t a lw e i g h t i tc a nb es a i dt h a tt h el ct e s to f c e t - 6a c c o u n t sf o ral a r g ep r o p o r t i o no f t h ew h o l et e s t a g o o dt e s ts h o u l dm e a s u r ew h a ti ti si n t e n d e dt om e a s u r ea n dn o t h i n ge l s e i fa t e s td o e s t h i s ，i ti ss a i dt ob ev a l i d w h e nw ed i s c u s st h eq u a l i t yo fac e r t a i nt e s t ，c o n s t r u c tv a l i d i t y , w h i c hr e f e r st ot h ee x t e n tt ow h i c ht h et e s tm e a s u r e st h ef i g h tc o n s t r u c t si ti n t e n d st oc a l c u l a t e ， i sa l w a y st h ec e n t r a li s s u e ( b a c h m a n ，19 9 0 ) i ti st h r o u g hc o n s t r u c tv a l i d i t yt h a tl a n g u a g e t e s t i n gc a nb ep u t0 1 1as o u n d e gm o r es c i e n t i f i cf o o t i n g ( h u g h e s ，19 9 0 ) ag o o dt e s ts h o u l d a l s om e e tt h er e q u i r e m e n to fa c h i e v i n gt h ec o n t e n tv a l i d i t y a n dm o r ei m p o r t a n t l y , t h et e s t t a k e r so b t a i nt h es c o r e st h r o u g ht h eh y p o t h e s i z e dw a y so rp r o c e s s e sb yt a s kd e s i g n e r s t h e f o c u so ft h er e c e n ts t u d i e sa b o u tl i s t e n i n gh a sb e e nt r a n s f e r r e df r o mt h ep r o d u c to rm e t h o d so f t e a c h i n gt oi n v e s t i g a t i n gt h el i s t e n i n gp r o c e s s t h e r e a s o nf o rt h es h i f to fr e s e a r c hf o c u si s t h a tr e s e a r c h e r sh a v er e a l i z e dt h ec o m p l e xa n di n v i s i b l en a t u r eo fl i s t e n i n ga n dt h e yh a v e g r e a ti n t e r e s ti nt h ec o g n i t i v ef a c t o r su n d e r l i n i n gi t t h er e s e a r c h e sa n dt h e i rf i n d i n g so f l i s t e n i n gp r o c e s s e sh a v en o to n l yp e d a g o g i c a li m p l i c a t i o n s ，b u ta l s og r e a ts i g n i f i c a n c ef o r c o n s t r u c tv a l i d a t i o no ft e s t sf r o man e wp e r s p e c t i v e ( d e n gy u d a n ，2 0 0 7 ) t h e r e f o r e ，i ti s s u p p o s e dt h a tt h e s et h r e ea s p e c t sl i k et h el i s t e n i n gc o m p r e h e n s i o nt e s t ，t h es t r a t e g i e so ft e s t t a k e r sa n dt e s tt a k e r s p e r f o r m a n c e so nt h o s ei t e m sc o n t r i b u t et oa l le x p l o r a t i o no ft h e c o n s t r u c tv a l i d i t yo ft h el i s t e n i n gt e s to fc e t - 6 1 2s i g n i f i c a n c eo ft h i sr e s e a r c h t h i ss t u d yi sm e a n i n g f u li nt h ef o l l o w i n gt w oa s p e c t s ： f i r s t l y , l i s t e n i n gi s a l le s s e n t i a ll a n g u a g es k i l lw h i c ht y p i c a l l yd e v e l o p sf a s t e rt h a n s p e a k i n ga n dt h a to f t e ni n f l u e n c e st h ed e v e l o p m e n to fr e a d i n ga n dw r i t i n ga b i l i t yi nt h en e w l a n g u a g e ( s c a r c e l l a & o x f o r d ，19 9 2 ) l i s t e n i n gi s u s e df a rm o r et h a na n yo t h e rs i n g l e l a n g u a g es k i l li nn o r m a ld a i l yl i f e t h ei m p o r t a n c eo fl i s t e n i n gc a n n o tb eu n d e r e s t i m a t e d ；i ti s i m p e r a t i v ea n di t c a n n o tb et r e a t e dn e g l i g i b l yi ns e c o n dl a n g u a g el e a r n i n ga n dt e a c h i n g n e w m a r ka n dd i l l e r ( 19 6 4 ) u n d e r l i n e d “t h en e e df o rt h es y s t e m a t i cd e v e l o p m e n to fl i s t e n i n g c o m p r e h e n s i o nn o to n l ya sab a s i sf o rs p e a k i n g ，b u ta l s oa sas k i l li ni t so w nr i g h t ( q t d i n m 0 r l e 弘1 9 91 ：2 0 ) r e c e n ts t u d i e sh a v es h o w nh o wl i s t e n i n gs t i m u l ia r ep r o c e s s e d ，e s p e c i a l l y d i f f e r e n c e so fs t r a t e g yu s eb yt h et e s tt a k e r sd i f f e r i n gi nl i g h to fp r o f i c i e n c yl e v e la n dg e n d e r a r eu s e f u la n dm e a n i n g f u li nt h ef o l l o w i n gt h r e ew a y s ：1 ) d e s c r i b i n ga n dc l a s s i f y i n gs t r a t e g i e s u s e db yl i s t e n e r so fd i f f e r e n tp r o f i c i e n c yl e v e l s ；2 ) i m p r o v i n gt h em e t h o d so ft e a c h i n g , o r t r a i n i n go fs t r a t e g i cc o m p e t e n c e ；3 ) i n v e s t i g a t i n gt h ec o n s t r u c tv a l i d i t yo fa t e s ti nad y n a m i c w a y ( 0 m a l l e y & c h a m o t ，1 9 8 9 ；b a c o n ，1 9 9 2 ；j i a n g , 1 9 9 4 ；v o g e l y , 1 9 9 5 ；h e b a o ，2 0 0 6 ) s e c o n d l y , v a l i d i t ya n dr e l i a b i l i t ya r et w oi m p o r t a n tp r i n c i p l e so ft e s t i n g t h ec o n s t r u c t v a l i d i t yi n v o l v e s w h e t h e rt h et e s ts c o r e sc a ne x p l a i nt h es t u d e n t s l a n g u a g ea b i l i t i e s i n t e r - c o n s i s t e n c yr e l i a b i l i t ys t r a t e g i e s ，a st h en a m ei m p l i e s ，e s t i m a t et h ec o n s i s t e n c yo f at e s t u s i n go n l yi n f o r m a t i o ni n t e r n a lt oat e s t ，t h a ti s ，a v a i l a b l ei no n e a d m i n i s t r a t i o no fas i n g l et e s t ( b r o w n ，2 0 0 5 ) 。i ti sj u d g e db ys p e c i a l i s t sa st h em o s tv a l u a b l ei n d i c a t o ro ft h ev a l i d i t yo fa 2 s u r v e yi n s t r u m e n t c e t - 6i san a t i o n a l ，l a r g e s c a l es t a n d a r d i z e dt e s t ，w i t hw h i c hg r e a t p e d a g o g i c a la n ds o c i a li m p l i c a t i o n sc a nb eo b t a i n e d 。w h a t sm o r e ，t h e r ei sag r o w i n gi n c r e a s e o ft h el ct e s to fc e t - 6 t h eg u a r a n t yo ft h ec o n s t r u c tv a l i d i t yo ft h i sp a r tw i l lm a k eg r e a t c o n t r i b u t i o nt ot h er e a l i z a t i o no fh i g hc o n s t r u c tv a l i d i t yo ft h ew h o l ep a p e ra n dp r o v i d e i n s i g h t si n t oc l a s s r o o mt e a c h i n g ( y a n gh u i z h o n g ，2 0 0 3 ) s i n c et h ef i r s ta d m i n i s t r a t i o ni n 1 9 8 7 ，c e th a sp l a y e da ni m p o r t a n tr o l ef o re n g j i s ht e a c h i n ga n dl e a r n i n gi nc h i n a d u r i n g t h e s e ) , c a r s ，i ti sm o v i n gf o r w a r df r o mt e s t i n gt e s t e e s l a n g u a g ek n o w l e d g et ot e s t i n gt e s t e e s c o m m u n i c a t i v ec o m p e t e n c e b u tt h e r es t i l le x i s t sc r i t i c i s m sw i 也r e g a r dt ot h ev a l i d i t ya n d r e l i a b i l i t yo fi t s e l fa n di t si n f l u e n c e so ne n g l i s ht e a c h i n ga n dl e a r n i n g a c c o r d i n g l y ，i th a s a t t r a c t e dt h ea t t e n t i o no fb o t ht h ep o l i c ym a k e r sa n dl a n g u a g er e s e a r c h e r s ，w h oh a v e r e c o g n i z e dt h a ti ti su r g e n tt oi m p r o v et h ev a l i d i t yo fc e zh e r e ，i ti sp r o p e rt oi n v e s t i g a t et h e l ct e s to fc e t - 6w i mc o n s t r u c tv a l i d i t y t h i r d l y , t h er e s e a r c h e so nt h ec o n s t r u c tv a l i d i t yo ft h el ct e s tm a i l l l yp a ys p e c i a l a t t e n t i o nt ot h ec o n t e n tv a l i d i t y a sf a ra st h ea u t h o rk n o w s ，n o b o d yh a sd o n et h es t u d yo nt h e c o n s t r u c tv a l i d i t yo ft h el i s t e n i n gc o m p r e h e n s i o nt e s to fc e t - 6 t h i sr e s e a r c hw i l lp r o v i d e n e w e m p i r i c a le v i d e n c ew h i c hh e l p st oi n s t r u c tc o l l e g ee n g l i s hl e a r n i n ga n dt e a c h i n g 1 3m e t h o d o l o g yo ft h i sr e s e a r c h t h i sr e s e a r c hi sas t u d yo nt h ec o n s t r u c tv a l i d i t yo ft h el i s t e n i n gc o m p r e h e n s i o nt e s to f c e t 6 p a r t i c i p a n t sf o rt h i sr e s e a r c hs u r v e ya r es t u d e n t sw h oh a v ej u s tt a k e nt h el a t e s tc e t _ 6 o fj u n e ，21 或，2 0 0 8a f t e rh a v i n gf i n i s h e do n ea n dah a l fy e a r so rn e a r l yt w oy e a r s s t u d yo f e n g l i s hi nu n i v e r s i t y d e n g s ( 2 0 0 7 ) t e s tt a k i n gq u e s t i o n n a i r ei se m p l o y e d i no r d e rt o c a l c u l a t et h ed i f f i c u l t ya n dd i s c r i m i n a t i o no ft h el ct e s tp a p e r , 4 0o ft h ep a r t i c i p a n t sa r e a s k e dt op e r f o r mt h el ct e s to fc e t 6o fj u n e21 吼，2 0 0 8w h i c hi sc a r r i e do u tw i t ht h es a m e r e q u i r e m e n t so far e a lt e s t t h el ct e s tp a p e rf o rt h i sr e s e a r c hi st h el a t e s tl ct e s tp a p e ro f c e t 6 ，w h i c hw a sa d m i n i s t r a t e do nj u n e21 班，2 0 0 8 6o ft h e4 0t e s tt a k e r sa r ea s k e dt o p e r f o r mt h ei m m e d i a t er e t r o s p e c t i o na n dt h ep r o t o c o la r et h e nt r a n s c r i b e d i nt h es p s s11 5 d o c u m e n t s ，c r o n b a c h sa l p h av a l u ea n dt h es p l i t h a l fa l p h aa r ec a l c u l a t e df i r s tt op r o v ea l l3 6 s t r a t e g i e s i n t e r n a lc o n s i s t e n c yr e l i a b i l i t ya n dn e x t ，e x p l o r a t o r yf a c t o r ya n a l y s i si se m p l o y e d t oe x p l a i n3 6s t r a t e g i e s v a l i d i t ya n dc o m p o n e n tf a c t o r sa r ee x t r a c t e d o nt h eg r o u n do f 3 c l a s s i f i c a t i o no fq u e s t i o ni t e mt y p e s ，t h ec o n t e n to fl ct e s tp a p e ro fc e t - 6w a si n v e s t i g a t e d t oc a l c u l a t et h er a t i oo ft h ed i s t r i b u t i o no ft h r e ed i f f e r e n tq u e s t i o nt y p e s b yc a l c u l a t i n gt h e f a c i l i t yv a l u e ，t h er a t i o so ft h r e ed i f f i c u l tl e v e l sa r e e x a m i n e d 1 4o r g a n i z a t i o no ft h i sr e s e a r c h t h em a i nb o d yo ft h i sr e s e a r c hc o n s i s t so ff i v ec h a p t e r s c h a p t e ro n ei sa ni n t r o d u c t i o n t ot h ep r e s e n ts t u d y c h a p t e rt w op r e s e n t sal i t e r a t u r er e v i e wo fc o l l e g ee n g l