（英语语言文学专业论文）PETS三级考试中作文评分效度研究.pdf

摘要写作测试是语言测试不可或缺的一部分。许多大规模的英语测试，例如，c e t , t e m ，t o e f l ，都把写作作为测试的一个重要部分，p e t s 考试也不例外。但因受多种因素影响，其效度很难得到保证。其中评分是影响其效度的最重要因素之一。作为一种大规模测试，p e t s 考试已经并将受到更多的重视，但目前尚未见到关于p e t s 考试中写作评分效度的相关研究。本文的研究问题是：p e t s 三级考试中作文评分在多大程度上有效? 为了较全面的阐述本研究问题，本文将回答以下两个具体问题：( 1 ) 2 0 0 4 年3 月份和2 0 0 5 年3 月份p e t s 三级考试中的作文原始分数评分员和参照分数评分员分别在多大程度上一致?( 2 ) 2 0 0 4 年3 月份和2 0 0 5 年3 月份p e t s 三级考试中作文原始分数在多大程度上相关?本研究基于p e t s 语料库，采用系统抽样的方法抽取作文样本，对所抽取的样本进行多人重新评分来获取参照分数以便与试卷上的原始分数进行比较，并对所得数据进行相关分析和t 检验。研究结果显示：1 ) 2 0 0 4 年3 月份p e t s 三级考试中作文的原始分数和参照分数呈显著性相关( r = 0 8 6 9 ，p = 0 0 0 0 0 0 1 ) ，并且二者的平均分之间不存在显著性差异，但是原始分数的平均分比参照分数的平均分高。这说明虽然原始分数的评分员和参照分数的评分员对2 0 0 4 年3 月份p e t s 三级考试中的作文评判总体一致，但原始分数的评分员对作文的评判总体较宽松。2 ) 2 0 0 5 年3 月份p e t s 三级考试中作文的原始分数和参照分数呈显著性相关( r = 0 7 9 8 ，p = 0 0 0 0 0 0 1 ) ，但是二者的平均分在0 0 1 水平上呈显著性差异。这说明虽然原始分数的评分员和参照分数的评分员对2 0 0 5 年3 月份p e t s 三级考试中的作文评判总体一致，但他们的平均分之间存在显著性差异。此外，原始分数的平均分比参照分数的平均分高，这说明原始分数的评分员对作文的评判总体较宽松。3 ) 2 0 0 4 年3 月份p e t s 三级考试中作文原始分数的平均分和标准差比2 0 0 5 年3 月份p e t s 三级考试中作文原始分数的平均分和标准差低。二者不仅不相关，而且平均分之间存在显著性差异。这说明p e t s 三级考试中作文的跨年度问的评分可能存在不等值的现象。结果还显示，2 0 0 5 年3 月份p e t s 三级考试中作文的题目要求不具体，没有详细、i v清晰地向考生说明写作程序及评分方法，导致部分考生不能准确把握写作内容。此外，评分员也不清楚该如何权衡分数的比重。本研究结果的启示是，为了确保评分的稳定性和可靠性，p e t s 考试中心不仅要保证试题库的稳定，而且还要有一支合格的，稳定的，公正的评分员队伍。此外，借鉴c e t 和t e m 考试的研究成果，p e t s 考试中心还应该加强试题开发，确保试题更科学，更标准。关键词：写作测试；评分效度；全国英语等级考试( 三级)a b s t r a c tw r i t i n ga s s e s s m e n ti sa ni n d i s p e n s a b l ep a r to fl a n g u a g et e s t i n g ，w h i c he x i s t si na l m o s ta l lk i n d so fl a r g e s c a l et e s t ss u c h8 sc e t , t e m ，t o e f l ，a n dp e t si sn oe x c e p t i o n b u ti ti sd i f f i c u l tt oe n s u r ei t ss c o r i n gr e l i a b i l i t yo rs c o r i n gv a l i d i t y , f o ri ti st h r e a t e n e db ym a n yf a c t o r s ，a m o n gw h i c hr a t i n gi so n eo ft h em o s ti m p o r t a n to n e s a sal a r g e s c a l et e s t ，p e t sh a sa t t r a c t e da n dw i l lc o n t i n u a l l ya t t r a c tm u c hm o r ea t t e n t i o n ，b u tt h e r ea p p e a rn os t u d i e so ft h es c o r i n gv a l i d i t yo f w r i t i n ga s s e s s m e n ti ni tn o w t h i st h e s i si n t e n d st oi n v e s t i g a t et h es c o r i n gv a l i d i t yo f t h ee s s a y si np e t s 3 t h eg e n e r a lr e s e a r c hq u e s t i o ni s ：t ow h a te x t e n ta r et h ee s s a y si np e t s 3v a l i di nt e r m so fs c o r i n gv a l i d i t y ?i no r d e rt of u l l ya d d r e s st h eg e n e r a lr e s e a r c hq u e s t i o n ，t w os u b q u e s t i o n st i t l ei n v e s t i g a t e d ( 1 )t ow h a te x t e n ta r et h eo r i g i n a lr a t e r sc o n s i s t e n tw i t lt h es t a n d a r d i z e dr a t e r si nt h ea s s e s s m e n to ft h ee s s a y si np e t s 3i nm a r c h2 0 0 4a n dt h a ti nm a r c h2 0 0 5 7 ( 2 ) t ow h a te x t e n td ot h eo r i g i n a le s s a ys c o r e so fp e t s 3i nm a r c h2 0 0 4a n dt h o s ei nm a r c h2 0 0 5c o r r e l a t e 、瓶t l le a c ho t h e r ?i nt h i ss t u d y , t h ee s s a y sw e r es y s t e m a t i c a l l ys a m p l e do nt h eb a s i so fp e t sc o r p u s t h es a m p l e de s s a y sw e r er e r a t e dt og e ts t a n d a r d i z e ds c o r e st oc o m p a r ew i t ho r i g i n a ls c o r e so ns a m p l e de s s a y s t h ed a t aw e r ea n a l y z e du s i n gt h ec o r r e l a t i o na n dt - t e s tp r o c e d u r e s s t a t i s t i c a la n a l y s i so f t h ed a t ay i e l d st h ef o l l o w i n gf i n d i n g s ：1 ) t h eo r i g i n a lr a t i n g sa n ds t a n d a r d i z e dr a t i n g so ne s s a y si np e t s 3i nm a r c h2 0 0 4a r es i g n i f i c a n t l yc o r r e l a t e d ( r - - o 8 6 9 ，p 2 0 0 0 0 0 0 1 ) ，a n dt h e r ei sn os i g n i f i c a n td i f f e r e n c eb e t w e e nt h e i rm e a ns c o r e s b u tt h em e a ns c o r eo fo r i g i n a lr a t i n g si sh i g h e rt h a nt h a to fs t a n d a r d i z e dr a t i n g so ne s s a y si np e t s 3i nm a r c h2 0 0 4 i ts u g g e s t st h a ta l t h o u g ho r i g i n a lr a t e r sa r ec o n s i s t e n t 耐t l ls t a n d a r d i z e dr a t e r so ne s s a y si np e t s 3i nm a r c h2 0 0 4 也ew e a k n e s si st h a to r i g i n a lr a t e r sa l eab i tl e n i e n tw h e nr a t i n gt h ee s s a y s 2 ) t h eo r i g i n a lr a t i n g sa n ds t a n d a r d i z e dr a t i n g so ne s s a y si np e t s 3i nm a r c h2 0 0 5a r es i g n i f i c a n t l yc o r r e l a t e d ( r = o 7 9 8 ，p = 0 0 0 0 0 0 1 ) ，b u tt h e i rm e a ns c o r e sa r es i g n i f i c a n t l yd i f f e r e n ta tt h eo 0 1l e v e l i ts u g g e s t st h a ta l t h o u g ho r i g i n a lr a t e r sa r ec o n s i s t e n tw i t hs t a n d a r d i z e dr a t e r s ，t h e r ei sas i g n i f i c a n td i f f e r e n c eb e t w e e nt h e i rm e a ns c o r e so ne s s a y si np e t s 3i nm a r c h2 0 0 5 i na d d i t i o n ，t h em e a ns c o r eo fo r i g i n a lr a t i n g si sh i g h e rt h a nt h a to fi s t a n d a r d i z e dr a t i n g s i ts u g g e s t st h a to r i g i n a lr a t e r sa r em o r el e n i e n tw h e nr a t i n gt h ee s s a y st h a nt h o s es t a n d a r d i z e dr a t e r s 3 ) t h em e a ns c o r ea n dt h es t a n d a r dd e v i a t i o no fo r i g i n a lr a t i n g so ne s s a y si np e t s 3i nm a r c h2 0 0 4a r el o w e rt h a nt h o s ei nm a r c h2 0 0 5 n o to n l ya r et h e yn o tc o r r e l a t e dw i t he a c ho t h e r , b u ta l s ot h e i rm e a ns c o r e sa r cs i g n i f i c a n t l yd i f f e r e n t i ts u g g e s t st h a tt h ei n t e r - y e a rr a t i n g so ne s s a y si np e t s 3m a yn o te q u a t e t h eq u a l i t a t i v ed a t ai n d i c a t et h a tt h et e s tp r o m p t si np e t s 3i nm a r c h2 0 0 5a r en o ts p e c i f i ci nt e r m so f t h ew r i t i n gp r o c e d u r e sa n ds c o r i n gm e t h o d sf o rt e s tt a k e r st of o l l o w , w h i c hr e s u l t si nt h a ts o m et e s t e e sc o u l dn o tw r i t ea c c u r a t e l y i na d d i t i o n t h er a t e r sa r en o ts h o w nh o wt ow e i g h tt h es c o r e s t h i ss t u d ys u g g e s t st h a tt h ep e t st e s t i n gc e n t e rs h o u l dn o to n l yk e e pt h ei t e mb a n k ss t a b l e ，b u ta l s oh a v eaq u a l i f i e d ，s t a b l ea n df a i rr a t i n gt e a mi no r d e rt oe n s u r et h a tt h er a t i n gs c o r e sa r es t a b l ea n dr e l i a b l e a n dw i t ht h er e s e a r c hp r o d u c t so fc e ta n dt e m ，t h ep e t st e s t i n gc e n t e rs h o u l de n h a n c et h ed e v e l o p m e n to ft h ei t e m sa n de n s u r et h a tt h ei t e m s & r ed e s i g n e di nm o r es c i e n t i f i ca n ds t a n d a r d i z e dw a y s k e yw o r d s ：w r i t i n ga s s e s s m e n t ；s c o r i n gv a l i d i t y ；p e t s 31 a b l e st a b l e3 1t a b k3 2t a b l e3 3t a b l e3 41 曲k3 5t 山l e3 6t a b k3 7t a b l e3 8t a b l e3 9见山l e3 1 0t ，出l e3 1 1m 出i e3 1 2t a b l e3 1 3t a b l e3 1 4m l b l e3 1 5t a b l e3 1 6t a b l e3 1 7t a b l e3 1 8t i b l e3 1 9l i s to ft a b l e sa n df i g u r e s1 1 ki n t e r n a lr e l i a b i l i t yo f t h r e er a t e r so ne s s a y si np e t s 3i nm a r c h2 0 0 4 3lc o r r e l a t i o na n a l y s i so f s c o l e so ne s s a y si np e t s 3i nm a r c h2 0 0 4 - 3 21 ki n t e r n a lr e l i a b i l i t yo f t h r e er a t e r so ne s s a y si np e t s 3i nm a r c h2 0 0 5 。3 2c o r r e l a t i o na n a l y s i so fs c o r e so ne s s a y si np e t s 3i nm a r c h2 0 0 5 3 3d e s c r i p t i v ea n a l y s i so fo r i g i n a lr l 血l g sa n ds t a n d a r d i z e dr a t i n g so ne s s a y si np e t s 3i nm a r c h2 0 0 4 3 5c o n e l a t i o na n a l y s i sb e t w e e no r i g i n a lr a t i n g sa n ds t a n d a r d i z e dr a t i n g sf i l le s s a y si np e t s 3i nm a r c h2 0 0 4 - 3 f ；p a i r e ds a m p l e st - t e s tf o ro r i g i n a lr a t i n g sa n ds t a n d a r d i z e dr a t i n g so ne s s a y si n p e t s 3i n m a r c h 2 0 0 4 3 7d e s c r i p t i v ea n a 王y s i so fo r i g i n a lr a t i n g sa n ds t a n d a r d i z e dr a t i n g so ne s s a y si np e t s 3i nm a r c h2 0 0 5 3 8c o r r e l a t i o na n a l y s i sb e t w e e no r i g i n a lr a t i n g sa n ds t a n d a r d i z e dr a t i n g so ne s s a y si np e t s 3i nm a r c h2 0 0 5 3 9p a i r e ds a m p l e st - t e s tf o ro r i g i n a lr a t i n g sa n ds t a n d a r d i z e dr a t i n g so ne s s a y si np e t s 3i nm a r c h2 0 0 5 4 0p a i r e ds a m p l e sc o r r e l a t i o n so fe s s a y si nh i g h e rs c o r eg r o u p s 4 3p a i r e ds a m p l e st - t e s tf o re s s a y si nh i g h e rs c o r eg r o u p s 4 3p a i r e ds a m p l e sc o r r e l a t i o n so fe s s a y si nl o w e rs c o r eg r o u p s 4 4p a i r e ds a m p l e st - t e s tf o re s s a y si nl o w e rs c o r eg r o u p s 4 4p a i r e ds a m p l e sc o r r e l a t i o n so fe s s a y si nm e d i u ms c o r eg r o u p s 4 5p a i r e ds a m p l e st - t e s tf o re s s a y si nm e d i u ms c o r eg r o u p s 4 5d e s c r i p t i v ea n a l y s i so f o r i g i n a lr a t i n g so ne s s a y si np e t s 3i nm a r c h2 0 0 4 a n dt h 0 i nm a r c h2 0 0 5 4 7c o r r e l a t i o na n a l y s i sb e t w e e no r i g i n a lr a t i n g so ne s s a y si np e t s 3i n2 0 0 4a n dt h o s ei n2 0 0 5 4 8p a i r e ds a m p l e st - t e s tf o ro r i g i n a lr a t i n g so i le s s a y si np e t s 3i nm a r c h2 0 0 4a n dt h o s ei nm a r c h2 0 0 5 5 1o v e r a l lf r e q u e n c yo fs e l e c t e ds c r i p t s 5 6f i g u r e sf i g u r e1 1s u b - f r a m e w o r k o f s c o r i n g v a l i d i t y 1 2f i g u r e3 1d i s t r i b u t i o n so f o r i g i n a ls c o r e s0 1 1e s s a y si np e t s 3i nm a r c h2 0 0 4 。3 4f i g u r e3 2d i s t r i b u t i o n so f s t a n d a r d i z e ds c o r e so ne s s a y si np e t s 3i nm a r c h2 0 0 4 3 4f i g u r e3 3d i s t r i b u t i o n so f o r i g i n a ls c o r n s0 1 1e s s a y si np e t s 3i nm a r c h2 0 0 5 3 8f i g u r e3 4d i s t r i b u t i o n so f s t a n d a r d i z e ds c o r e so i le s s a y si np e t s 3i nm a r c h2 0 0 5 3 8xa i ：您衄c e t 4c e t 6e f le s lf s ep e t sp e t s 3s p s st e m 41 e m 8t o e f ll i s to f a b b r e v i a t i o n sa s s o g i a t i o no f l a n g u a g et e s t e r si ne u r o p ea m e r i c a np s y c h o 蛔i c a la s s o c i a t i o nc o u e g ee n g l i s ht e s tb a n d 4c o h e g ee n g l i s ht e s tb a n d 6e n g l i s ha saf o r e i g nl a n g u a g ee n g l i s ha f tas e c o n dl a n g u a g ef i n a ls e m e s t e re x a m i n a t i o np u b l i ce n g l i s ht e s ts y s t e mp u b l i ce n g l i s ht e s ts y s t e ml e v e bs t a t i s t i c a lp a c k a g ef o rs o e i a ls c i e n c e st e s tf o re n g l i s hm a j o 塔b a n d 4t e s tf o re n g l i s hm 旬o r sb a n d 8t e s to f e n o i s ha saf o r c i g nl a n g u a g e鲁东大学学位论文原创性声明和使用授权说明学位论文原创性声明本人郑重声明：所呈交的论文是本人在导师的指导下独立进行研究所取得的研究成果。除了文中特别加以标注引用的内容外，本论文不包含任何其他个人或集体已经发表或撰写的成果作品。对本文的研究做出重要贡献的个人和集体，均己在文中以明确方式标明。本人完全意识到本声明的法律后果由本人承担。作者签名：岔涛匀，日期：知。7 年占月幻e l学位论文版权使用授权书本学位论文作者完全了解学校有关保留、使用学位论文的规定，同意学校保留并向国家有关部门或机构送交论文的复印件和电子版，允许论文被查阅和借阅。本人授权鲁东大学可以将本学位论文的全部或部分内容编入有关数据库进行检索，可以采用影印、缩印或扫描等复制手段保存和汇编本学位论文。本学位论文属于保密口，在年解密后适用本授权书。不保密巧( 请在以上相应方框内打“”)作者签名：澎膨身一日期：和7 年占月为1 3导师签名：彳1 慨日期：枷- 7 年6 月劢日a c k n o w l e d g e m e n t si mi n d e b t e dt oan u m b e ro f p e o p l ef o rt h e i ri n v a l u a b l ea s s i s t a n c ei nt h ep i q 埔期五a n dc o m p l e t i o no f t h i sm ad i s s e r t a f i o mf i r s to fa l l ，m yh e a r t f e l tg r a t i t u d eg o e st om ys u p e r v i s o r , p r o f x i ux u d o n g ，f o rh i sc a r e f u la n ds t r i c ts u p e r v i s i o n s w i t h o u th i sp a t i e n tg u i o a n ，c r i t i c a lc o n m a o l t s ，a n de n l i g h t e n i n gs u g g e s t i o n s ，t h i sd i s s e r t a t i o nw o u l dn o th a v et a k e nt h ep r e s e n tf o r m m ys j n c e t h a n k sa l s og ot op r o f x i a od a f af o rh i sg e n e r o u se n o a u r a g e m e n ta n dp e r m i s s i o ni nt h ea p p l i c a t i o no f p e t sc o r p u so f s c h o o lo f f o r e i g nl a n g u a g e s t h a n k ss h o u l da l s ob ed u et op r o f d i n gx i n s l 越m , p r o f w a n g 舭p r o f j i az h e n g c h u a n , p r o f z b a n gf u y o n g , a n dp r o f l in e p i n gw h og a v em ei l l s | 瞳u c d o n sa n de n c o u r a g e m e n td u r i n gm ym as t u d y t h e i rv a l u e dl e s s o n sa n dl e c t u r e sa l ev e r yh e l p f u lt ot h ef u l f i l l m e n to f t h i sd i s s e r t a t i o n ia l s oo w eap a r t i c u l a rd e b to f g r a t i t u d et om r y u a nf e n g s h ia n dm r l it a ow h oh e l p e dm es o l v es o m ep u z z l m gp r o b l e m sie n c o u n t e r e dw h e na n a l y z i n gt h er e s u l t so f t h es t u d y ia mg r a t e f u lt om i s sw a n gs h a o n aa n dm i s sy o n gq i a o l i n gw h oh e l p e dt or a t et h es a m p l e de s s a y s m yt h a n k sa r ea l s oe x t e n d e dt oa l lm yo t h e rt e a c h e r sa n df r i e n d sf o rt h e i rc o n t i n u o u se n c o u r a g e m e n t f i n a l l y , 1w o u l dl i k et oe x p r e s sm yc o r d i a lg r a t i t u d et om yf a m i l yw h o s el o v ei st h ee n d u r i n gs o l i r c eo f m ys t r e n g t h鲁东大学硕士学位论文i n t r o d u c t i o ni nt h ef i e l do fe n g l i s hl a n g u a g et e s t i n g , i s s u e so nv a l i d i t yh a v eb e e nw r i t t e nb ym a n ye x p e r t s ( l a d o ，1 9 6 1 ；h e a t o n , 1 9 8 8 ；b a c h m a n , 1 9 9 0 ；m e s s i c k , 1 9 8 9 ，1 9 9 5 ，1 9 9 6 ；a l d e r - ne ta 1 。1 9 9 5 ；b a c h m a n & p a l m e r , 1 9 9 6 ；w e i r , 1 9 9 3 ，2 0 0 5 ；m c n a m a r a , 2 0 0 0 ) t r a d i t i o n a l l y ,r e l i a b i l i t ya n dv a l i d i t yw e r er e g a r d e da st w os e p a r a t ea n dp a r a l l e lp r i n c i p l e si nl a n g u a g et e s t i n g0 3 a c l m ：l j m , 1 9 9 0 ) ，b u tw e i r ( 2 0 0 5 ：1 4 ) a r g u e st h a t r e l i j a b m t yw o u l db eb e t t e rr e g a r d e da so n ef o r mo f v a l i d i t ye v i d e n c e ，a p p o s i t e l yc a l l e ds c o r i n gv a l i d i t y , w h i c hi sa l s oa d v o c a t e db ya l d e r s o n ( 1 9 9 1 a ：6 1 6 3 ) t h a t “ih a v el o n gf o u n di td i f f i c u l tt os e et h a ti t e mh o m o g e n e i t y( i n t e r n a lc o n s i s t e n c y ) c a nb es c a na sam a t t e ro fr e l i a b i l i t y , r a t h e rt h a na so n eo fv a l i d i t y p a r a l l e lf o r mr e l i a b i l i t yi ss i m p l yc o n c u r r e n tv a l i d a t i o n i nt h i ss t u d y , w ef o l l o ww e i r ( 2 0 0 5 ) ，b e c a u s eh ea r g u e st h a ts c o r i n gv a l i d i t ys e e m st ob et h em o s ts u i t a b l es u p e r o r d i n a t et e r mf o ra l la s p e c t so fr e l i a b i l i t y a c c o r d i n gt oh i m t h ev a l i d i t yc o n s i s t so ft h e o r y - b a s e dv a l i d i t y , c o n t e x tv m i d i t y , s c o r i n gv a l i d i t y , c r i t e r i o n - r e l a t e dv a l i d i t y , a n dc o n s e q u e n t i a lv a l i d i t yi nt h ec o n s i d e r a t i o no f v a l i d a t i o np r o c e s s i nt h ef i l e do f w r i t i n ga s s e s s m e n t , a l t h o u g hm a n yr e s e a r c h e so nw r i t i n ga s s e s s m e n th a v eb e e nc o n d u c t e db o t ha th o m ea n da b r o a d ( j a c o b se ta l ，1 9 8 1 ；h a m p - l y o u s ，1 9 8 9 ，1 9 9 1 ，1 9 9 5 ；d a v i d s o n1 9 9 1 ；v a u g h a n , 1 9 9 1 ；e n g e l h a r d , 1 9 9 6 ；s o n g & c a r u s o ，1 9 9 6 ；w e i g l e ，2 0 0 2 ；h y l a n d , 2 0 0 2 ；j i a nq i n g r a i n & l uj i a n p i n g , 2 0 0 0 ；c a lj i g a n g , 2 0 0 2 ；z h a n gw e n x i e g2 0 0 4 ；z h a oj i a n h u i ，2 0 0 4 ；z h a n gy a l e i ，2 0 0 4 ) i n t ov a r i o u st e s t s ，t h e ya r es e l d o mf o u n df o c u s i n go nt h es c o r i n gv a l i d i t y , e s p e c i a l l yo nt h ee s s a y si np e t s ( p u b l i ce n g l i s ht e s ts y s t e m ) a l t h o u g hw e i r ( 2 0 0 5 ) r e g a r d ss c o r i n gv a l i d i t ya so n ea s p e c to f v a l i d i t ye v i d e n c e ，h eh a sn o ty e tc a r r i e do u tas p e c i f i ce m p i r i c a ls t u d yo ni t i nc h i n a , t h es t l k l i e sc o n c e r n i n gs c o r i n gv a l i d i t yo fw r i t i n ga s s e s s m e n tm a i n l yf o c u so nc e ta n dt e m ( t e mt e s t i n gc e n t e r , 1 9 9 7 ；z u ns b e n &y a n gr e n m i n g 2 0 0 2 ；y a n gh u i z h o n g & w e i r , 1 9 9 8 ；w a n gy u e w u , 2 0 0 4 ；x i ux u d o n g , 2 0 0 6 ) a sal a r g e s c a l et e s t , p e t sh a sa t t 瞄l c t e da n dw i l lc o n t i n u a l l ya t t r a c tm u c hm o r ea t t e n t i o n , b u tt h e r ea p p e a rn or e s e a r c h e so nt h es c o r i n gv a l i d i t yo fe s s a y si ni tn o w , a m o n gw h i c hr a t i n gi so n eo ft h em o s ti m p o r t a n tf a c t o l 苫a f f e c t i n gt h er e l i a b i l i t y ( b a c h m a n , 1 9 9 0 ；w e i r , 1 9 9 3 ；a l d e r s o ne ta 1 1 9 9 5 ；m c n a m a r a , 1 9 9 6 ；x i ux u d o n g , 2 0 0 6 ) t h u s , i ti sw o r t h yo fi n v e s t i g a t i n gt h ee x t e n tt ow h i c ht h ee s s a yi np e t si sv a l i di nt e r m so fs c o r i n gv a l i d i t y a sl鲁东大学硕士学位论文c m n b a c h ( 1 9 9 0 ：1 2 1 ) a r g u e st h a tt h ev a l i d i t yw o d db es e r i o u s l yt h r e a t e n e di fat e s tl a c k ss c o r i n gv a l i d i t y h u g h e s ( 19 8 9 ：3 6 ) a l s oa r g u e st h a t i ft h es c o r i n go fat e s ti sn o tr e l i a b l e ,t h e nt h et e s tr e s u l t sc a l ln o tb er e l i a b l e ，e i t h e r t h i st h e s i si n t e n d st oi n v e s t i g a t et h es c o r i n gv a l i d i t yo f t h ee s s a y si np e t s 3 t h eg e n e r a lr e s e a r c hq u e s t i o ni s ：t ow h a te x t e n t 黜t h ee s s a y si np e t s 3v a l i di nt e r m so fs c o r i n gv a l i d i t y ?i no r d e rt of u l l yr e s p o n dt ot h eg e n e r a lr e s e a r c hq u e s t i o n , t w os u b q u e s t i o n sa r ei n v e s t i g a t e d 1 1t ow h a te x t e n t 眦t h eo r g i n a lr a t e l r 8c o n s i s t e n tw i t ht h es t a n d a r d i z e dr a t e r si nt h ea s s e s s m e n to f t h ee s s a y