（英语语言文学专业论文）电影《达芬奇密码》的多模态话语分析.pdf

中文摘要 中文摘要 随着科学技术的不断发展、多媒体和互联网络的广泛使用，在全球视觉文化 冲击的今天，多模态性( m u l t i m o d a l i t y ) 日益成为日常生活不可或缺的一部分，信 息的传递方式不再是单一的文本，取而代之的是包含了多种模式例如音频、视频 等，对多模态话语的研究成为一种必然趋势。作为批评话语分析( c r i t i c a ld i s c o u r s e a n a l y s i s ) 的一种，多模态话语分析( m u l t i m o d a ld i s c o u r s ea n a l y s i s ) 建立在系统 功能语言学和社会符号学的传统里，不断的被创新和探索。其中以k r e s s & l e e u w e n ( 1 9 9 6 ，2 0 0 6 ) 为代表的建立了视觉语法的基本框架，但是他们只是局限于静态 的图像分析。o h a l l o r a n ( 2 0 0 4 ) 试图建立一个完备的电影语篇分析体系，并且对 两个电影场景进行了初步的尝试。b a l d r y & t h i b a u l t ( 2 0 0 0 ，2 0 0 4 ) 也建立了对有限 篇幅的广告视频的分析框架。而电影语篇的话语分析在多模态话语分析领域被视 为一个复杂，艰难的课题。不但由于它包含多种符号模态系统及其相互作用，还 由于在动态的语篇流动下，这些符号系统的意义构建过程也在变化。因此对电影 多模态话语的研究同时具有理论价值与现实意义。 本文以k r e s s 和v a n l e e u w e n ( 1 9 9 6 ) 的视觉语法( v i s u a lg r a m m a r ，v g ) 为 基础，通过借鉴o h a l l o r a n 的电影语篇分析系统，以镜头( s h o t ) 为分析单位，通 过分解构成镜头的画格( f l a m e ) 构建电影语篇的多模态分析模型作为话语分析工 具，同时采用定性研究为主的分析方法，选取电影达芬奇密码的四个镜头和同名 小说的对应片段为语料，涉及电影语篇的多模态单位，主要维度，动态意义和比 较文本意义等方面进行实证性的分析和研究，也对所构建的模型进行了检验。 关键词：多模态话语分析；视觉语法；电影语篇；镜头；元功能 黑龙江大学硕士学位论文 a b s t r a c t a st h es c i e n c ea n dt e c h n o l o g ya d v a n c eq u i c k l ya n dt h ei n t e r n e ta n dm u l t i m e d i aa r e e x t e n s i v e l yi nu s e ，m u l t i m o d a l i t yh a sb e c o m ea ni n t e g r a t ep a r to fe v e r y d a yl i f ei nt h e w o r l dd o m i n a t e d b yv i s u a lc u l t u r e t h ei n f o r m a t i o nc o m m u n i c a t e dn o to n l yt h r o u g ht h e m o n o m o d a lt e x tb u ta l s ot h r o u g ht h em u l t i m o d a lt e x ts u c ha st h ea u d i oa n dv i d e o ，t h u s i n e v i t a b l yt h er e s e a r c h e so nt h em u l t i m o d a ld i s c o u r s eb e c o m eat r e n d a sp a r to f c r i t i c a ld i s c o u r s ea n a l y s i s ，m u l t i m o d a ld i s c o u r s ea n a l y s i si se x p l o r e da n dp r o b e d u n d e rt h et r a d i t i o no fs y s t e m i cf u n c t i o n a lg r a m m a ra n ds o c i a ls e m i o t i s m a m o n g t h e s er e s e a r c h e s ，t h em o s tr e p r e s e n t a t i v ei st h ev g ( v i s u a lg r a m m a r ) s e tu pb yk r e s s & l e e u w e n ( 19 9 6 ，2 0 0 6 ) ，h o w e v e r ，t h e i rr e s e a r c h e s a r el i m i t e dt ot h es t a t i c i m a g e s o h a l l o r a n ( 2 0 0 4 ) t r i e dt os e tu pad e t a i l e df r a m e w o r ko fm d as y s t e mo fm o v i et e x t a n dm a d et e n t a t i v ee x p e r i m e n tw i t ht w os c e n e s b a l d r y & t h i b a u l t ( 2 0 0 0 ，2 0 0 4 ) a l s os e t u paf r a m e w o r kf o rm d a o ft h ea d v e r t i s e m e n tv i d e o t h em d ao fm o v i et e x ti s c o n s i d e r e dt ob ead i f f i c u l ta n dc o m p l e xs u b j e c t ，b e c a u s ei ti n v o l v e sn o to n l ym u l t i p l e s e m i o t i cm o d a ls y s t e m sa n dt h e i ri n t e r p l a y , b u ta l s ot h ec h a n g e so ft h e s es y s t e mi nt h e p r o c e s so fm e a n i n gc o n s t r u c t i o nu n d e rt h e f l o wo fd y n a m i ct e x t t h e r e f o r e ，t h e r e s e a r c h e so nm d ao fm o v i e st e x tm a k eg r e a ts e n s eb o t hp r a c t i c a l l ya n dt h e o r e t i c a l l y b a s e do nt h ev gb yk r e s s & l e e u w e n ( 19 9 6 ，2 0 0 6 ) ，i n s p i r e db yt h ef r a m e w o r k p r o v i d e db yo h a l l o r a nf o rt h em d a o fm o v i et e x t ，t h i sp a p e rh a sm a d eam d ao ft h e f o u rs h o t ss e l e c t e df r o mt h em o v i et h ed av i n c ic o d ea n dt h ec o u n t e r p a r to ft h en o v e l b ya n a l y z i n gt h ec o n s t i t u e n tf r a m e sw i t ht h eh e l po ft h ep r o p o s e df r a m e w o r ko fm d a o fm o v i et e x t a n dt h i st h e s i sm a k e se x p e r i m e n t sw i t ht h es u b je c t sa st h eu n i to f a n a l y s i s ，c o m m o np a r a m e t e r s ，t h ed y n a m i cm e a n i n gc o n s t r u c t i o na n dt h ec o m p a r a t i v e t e x tm e a n i n g k e y w o r d s ： m u l t i m o d a ld i s c o u r s ea n a l y s i s ；v i s u a lg r a m m a r ；m o v i et e x t ；f r a m e ； m e t a f u n c t i o n s i l - l i s to ff i g u r e s f i g u r e2 1 ：m u l t i f u n c t i o n a l i t yf o r t h em o d a l i t i e so fv e r b i a g ea n di m a g e 1 3 f i g u r e2 2 ：t h ed i s p o s i t i o no fm e a n i n g sw i t h i nt h es p a t i a ld i m e n s i o no fv i s u a l c o m p o s i t i o n 2 6 f i g u r e2 3 ：m o d a l i t ys c a l ef o rc o l o rs a t u r a t i o n 3 0 f i g u r e2 4 ：m u l t i m o d a lc o r p u sa u t h o r i n gs y s t e m ：h o m ep a g e - 4 4 f i g u r e2 5 ：a nm c am i n i g r a m m a ra n dac o n c o r d a n c et h a ti tp r o d u c e sb y b a l d r y 4 4 f i g u r e2 6 ：af r a m ef r o mas c e n ea b o u t7m i n u t e si n t oad o c u m e n t a r y 4 9 f i g u r e3 1 ：r e s o u r c e sf o rv i s u a lg r a m m a ro r g a n i z e db ys i m p s o n b a s e do nt h eg r a m m a r o f v i s u a ld e s i g nb yk r e s sa n dv a nl e e u w e n 5 3 f i g u r e3 2 ：a10 - s e c o n ds e g m e n tf r o mt h et r a n s c r i p to fs t e v e n ss t o r y ，s h o w i n g p r o g r e s s i o ni ni m a g e ，t r a n s i t i o n ，( s p o k e n ) l a n g u a g e ，a n dm u s i cc h a n n e l sa l o n gw i t h r e l e v a n ti n t e r v i e we x c e r p t s 5 7 f i g u r e3 3 ：l i s to f a b b r e v i a t i o n si nm d ad e s c r i p t i o nb yb a l d r y 。5 8 f i g u r e3 4 ：ap r o c e s si nm d a o f ag i v e nm i s e - e n - s c e n eo f af i l mt e x t 6 0 f i g u r e3 5 ：ap i c t u r ef r o mt h ed v d o ft h ed av i n c ic d 比6 3 f i g u r e3 6 ：ap i c t u r eo ft h ev i t r u v i a nm a n 6 4 f i g u r e3 7 ：ap i c t u r eo ft h el a s ts u p p e r 。- 。6 5 i l l - 黑龙江大学硕士学位论文 l i s to ft a b l e s t a b l e2 1 ：m e a n i n gs y s t e mi nv i s u a lg r a m m a r 。1 8 t a b l e2 2 ：t h en a r r a t i v es y s t e m sd e v e l o p e df r o mk r e s s & v a nl e e u w e n 19 t a b l e2 3 ：t h ea n a l y s i so fc o n c e p t u a li m a g e 。2 0 t a b l e2 4 ：i n d i c a t i o nf r o mt h e d i s t a n c e b e t w e e nr e p r e s e n t e dp a r t i c i p a n t sa n dt h e v i e w e r ：2 2 t a b l e2 5 ：t h es y s t e m so fi n t e r a c t i v em e a n i n g s 2 4 t a b l e2 6 ：a ne x t r a c tf r o mo h a l l o r a n sf r a m e w o r ko fm d a o fm o v i e 3 5 t a b l e2 7 ：t h ea n a l y z i n gs t r u c t u r eo faf i l mb yo h a l l o r a n 。- 4 0 t a b l e2 8 ：a ne x t r a c tf r o mac l a s s i cm u l t i m o d a lt r a n s c r i p t i o no fp h a s e1 o ft h e f a n 4 2 t a b l e3 1 ：t h es i xl e v e l so ff i l ma n a l y s i sa d a p t e df r o mi e d e m a 。- 5 4 t a b l e3 2 ：ap r o p o s e df r a m e w o r kf o rt h em d aa n a l y s i so ft h em i s e e n s c e n e 6 1 t a b l e3 3 ：s o m ei n f o r m a t i o na b o u tt h em o v i et h ed av i n c ic o d e 。6 8 t a b l e4 1 ：t h em d ao fs h o to n ei nt h em o v i et h ed av i n c ic o d e 7 0 t a b l e4 2 ：t h em d ao fs h o tt w oi nt h em o v i et h ed av i n c ic o d e 。- 7 6 t a b l e4 3 ：t h em d ao fs h o tt w oi nt h em o v i et h ed av i n c ic o d e 8 1 t a b l e4 4 ：t h em d ao fs h o tt w oi nt h em o v i et h ed av i n c ic o d e 8 6 黑龙江大学硕士学位论文 毒i i i i i i i i i i i i i - 一高i i i i i i i 独创性声明 本人声明所呈交的学位论文是本人在导师指导下进行的研究工作及取得的研 究成果。据我所知，除了文中特别加以标注和致谢的地方外，论文中不包含其他 人已经发表或撰写过的研究成果，也不包含为获得墨蕉江太堂或其他教育机构的 学位或证书而使用过的材料。 学位论文作者繇丐岔整 签字吼加年6 月) 日 学位论文版权使用授权书 本人完全了解墨蕉江太堂有关保留、使用学位论文的规定，同意学校保留并 向国家有关部门或机构送交论文的复印件和电子版，允许论文被查阅和借阅。本 人授权墨蕉江太堂可以将学位论文的全部或部分内容编入有关数据库进行检索， 可以采用影印、缩印或其他复制手段保存、汇编本学位论文。 学位论文作者签名弩蓥蕴导师签名 t 多j f 签字日期： 口o 年6 月b 日签字日期：2 - o 汐年6 月日 学位论文作者毕业后去向： 工作单位： 通讯地址： 电话： 邮编： c h a p t e ro n ei n t r o d u c t i o n c h a p t e r o n ei n t r o d u c t i o n 1 1r e s e a r c hb a c k g r o u n da n d p u r p o s e f o rm a n yy e a r s ，t h er e s e a r c ho r i e n t a t i o ni n l i n g u i s t i cf i e l dh a sb e e nt h et e x t a n a l y s i s o rd i s c o u r s ea n a l y s i s ，w h i c hs h o w sa ne x c l u s i v ei n t e r e s ti nt h et y p eo f r e c o u r s e s ：t h el a n g u a g e t h ed i f f e r e n tg e n r e so fw r i t i n gl i k en o v e l s ，d r a m a s ，s h o r t s t o r i e s ，t h ed o c u m e n t sa n dn e w sw r i t i n g sa r ek e p tt ob et h es u b je c t so ft h et h e s i sa n d p a p e r sa ta l ll e v e l s 。 a st h ei n t e m e th a sb e c o m ea ni n t e g r a t ep a r to fp e o p l e s e v e r y d a yl i f ea n dt h e c o m p u t e rs c i e n c ea n dt e c h n o l o g ya d v a n c er a p i d l y ，h u m a nc o m m u n i c a t i o no c c u r s 谢t t l m u l t i p l em o d e si n t e r a c t i n ga n dc o o p e r a t i n g 诵t he a c ho t h e r e v e r y d a y ，p e o p l e c o m m u n i c a t et h r o u g hc o l o r s ，s o u n d ，m u s i c ，g e s t u r e s ，m o t i o n s ，i m a g e s ，a n do t h e r n o n v e r b a lr e s o u r c e s f o re x a m p l e ，n e w s p a p e r sh a v em o r ep i c t u r e st h a nb e f o r ea n dt h e n e w ss t o r i e sa r ed e l i v e r e du s u a l l yb yv i d e o si nt h ei n t e r n e t t h e r e f o r e ，t h ec h a n g eo f r e s e a r c ho r i e n t a t i o ni nd i s c o u r s ea n a l y s i sf r o mm o n o m o d a l i t yt om u l t i m o d a l i t yb e c o m e s an e c e s s i t y a l t h o u g hm a n yl i n g u i s t sh a v em a d ep r o f o u n ds t u d i e sa n dr e s e a r c h e so ft h e m u l t i m o d a lt e x t sl i k ea r c h i t e c t u r e ，s c u l p t u r e ，f i l mp o s t e r s ，n e w s p a p e r s ，m a g a z i n e sa n d t e x t b o o k s ，t h e r ei s l i t t l ea t t e n t i o np a i dt oa n a l y s i so fm o v i ew h i c hi n v o l v e sm u l t i p l e m o d e so fc o m m u n i c a t i o na n dc o m p l e xp r o c e s so fm e a n i n gc o n s t r u c t i o n t h em o v i et e x ts h o w sam o s ts i m i l a rp r o c e s so fo u rw o r l de x p e r i e n c e s ，t h r o u g h w h i c ht h ec o m p l e xm e a n i n g sa n di n f o r m a t i o na r ec o n s t r u c t e da n de x p r e s s e d t h em o v i e t h ed av i n c ic d 沈w i t hi t sn o v e li sap e r f e c te x a m p l eo fu s i n gs y m b o l i s mi n s t o r y t e l l i n g i n s p i r e db yt h es u c c e s sa n dp o p u l a r i t yo ft h em o v i e ，t h i st h e s i si sp r o v i d e d 、i t ha b u n d a n tm a t e r i a lf o rf u r t h e rr e s e a r c h e so nm u l t i m o d a l i t y 。 t h i st h e s i sp a p e rb a s e si t sm a j o re x p l o r a t i o no nk r e s sa n dl e e u w e n ( 19 9 6 ，2 0 0 6 ) s 黑龙江大学硕士学位论文 v i s u a lg r a m m a rw h i c hi sc o m p r e h e n s i v e l yd e s c r i b e di nt h el a n d m a r kt e x t b o o kr e a d i n g i m a g e sa n dk a yl o h a l l o r a n si n v e s t i g a t i o ni nv i s u a ls e m i o s i s 加f i l m ( 2 0 0 4 ) t h r o u g had e s i g n e df r a m e w o r ka n dt h es e l e c t i o no fs o m es h o t so ft h em o v i et h ed a v i n c ic o d e 、am u l t i m o d a ld i s c o u r s e a n a l y s i si sm a d et ot e s tp r a c t i c a lu s a g eo ft h e p r o p o s e dm o d a la n dd e s i g n e dt of i n do u tt h el i m i t a t i o n s a n dm o r ei m p o r t a n t l y ，t h ep u r p o s eo ft h i st h e s i si st or e c o n s t r u c tt h es y s t e m c o n s i s t i n go faf e wm o s tc o m m o np a r a m e t e r sf o rt h em u l t i m o d a ld i s c o u r s ea n a l y s i so f m o v i e s 1 2r a t i o n a l e sf o rt h ep r e s e n tr e s e a r c h 1 2 1p r a c t i c a lr a t i o n a l e i ti s i m p o s s i b l ef o rc h i n at ol i v ei nav a c u u mi nt h eh i s t o r i c a lc o n t e x to f g l o b a l i z a t i o n ，a n ds h eh a sa l lk i n d so fc o n n e c t i o n s 州t hg l o b a l l yp o l i t i c a l ，e c o n o m i ca n d c u l t u r a lc o n t e x t i ft h eu n i t e ds t a t e sp r o d u c e sm o s tm e d i ai nt h ew o r l ds u c ha sf i l m ， t e l e v i s i o n ，a n dm u s i c ；c h i n an o wb e c o m e st h eg r e a t e s tm e d i ac o n s u m e ri nt h ew o r l d h o w e v e r ，m u l t i m o d a l i t yi ss t i l lar e l a t i v e l yn e wc o n c e p tt om o s tc h i n e s e ，i n c l u d i n g e d u c a t o r s b yd r a w i n gi n s p i r a t i o n sf r o mt h ep h i l o s o p h i c a lu n d e r p i n n i n g s ，t h ep r e s e n t r e s e a r c hc o n t r i b u t e st ot h i sr e l a t i v e l yn e wf i e l db yp r o p o s i n ga ni n t e g r a t e da n dp r a c t i c a l f r a m e w o r kw h i c hi sb a s e do nv g ( k r e s sa n dv a nl e e u w e n ，19 9 6 ) i n s p i r e db ys f l ，a n d t h ef r a m e w o r kd e v e l o p e db yo h a l l o r a n ( 2 0 0 4 ) a n db yb a l d r ya n dt h i b a u l t ( 2 0 0 0 ) r e c e n t l y ，i na na t t e m p tt oc o n t r i b u t et ot h ee l a b o r a t i o no fm u l t i m o d a l i t y ，t op r o v i d ea b e t t e ru n d e r s t a n d i n go ft h em e a n i n gm a k i n go fd i f f e r e n td y n a m i ct e x t si no n eu n i to fa m o v i e e i s e n s t e i n ( 19 7 9 ) s a i dt h a tt h ei m p a c to ft e c h n o l o g yo nk n o w l e d g ei se v i d e n tf r o m t h ei n t r o d u c t i o no ft h ep r i n t i n gp r e s si n t h el a t ef i f t e e n t hc e n t u r y n o wt h ew o r l d m a i n s t r e a mc h a n n e lo fk n o w l e d g eh a sb e e ns w i t c h e df r o mt h em e d i at ot h ec o m p u t e r 2 c h a p t e ro n ei n t r o d u c t i o n a n di n t e r n e t t h ed a t aa n di n f o r m a t i o na r ec o m m o n l ym i x e dw i t hd i f f e r e n ti m a g e s ， s o u n da n dm u s i c t h et r a d i t i o n a lw a yo fp a s s i n gi n f o r m a t i o nh a sb e e nc h a n g e db yi t s n a t u r e t h u sm u l t i m o d a ld i s c o u r s ea n a l y s i si so p e n e dt oal a r g er a n g eo ft h eu p t o d a t e r e s o u r c e s a m o n gt h e s et h em o v i et e x ti sav a l u a b l er e s o u r c eo fo u rw o r l de x p e r i e n c e s t h et r a d i t i o n a lp o i n to fv i e wa b o u tt h el i t e r a c yh a st ob eb r o a d e n e db e c a u s eo ft h e e m e r g e n c eo fm u l t i p l em o d e so fc o m m u n i c a t i o n ，t h em o r ec o m p l e xo fm e a n i n g c o n s t r u c t i o na n dt h el i n g u i s t i ca n dc u l t u r a ld i v e r s i t y , w h i c ha r ef o u n db yt h en e w l o n d o ng r o u p ( 19 9 6 ) t h r o u g ht h ee x p l o r a t i o no ft h em d ao ft h em o v i es h o t s ，t h i s t h e s i sp a p e ra i m st oe n h a n c et h eu n d e r s t a n d i n g so ft h ep r o c e s so fc o m m u n i c a t i o nw h i c h i n v o l v e st h es p a t i a la n dt e m p o r a ld y n a m i c so fv i s u a ls e m i o s i s a l s oi ta i m st op a v et h e w a yf o rt h ef u r t h e re x p l o r a t i o no ft h ec o m m u n i c a t i o nw h e r es i g h t ，h e a r i n g ，t a s t e ，s m e l l ， a n dt o u c ha r ef u r t h e rs o u r c e sf o r s e n s o r ya n dw h i c hd e a l s w i t hh u m a n h u m a n m u l t i m o d a lc o m m u n i c a t i o ni n c l u d i n gs p e e c h - g e s t u r es y s t e m s ，s e m i o t i c so fg e s t u r e ， s t r u c t u r ea n df u n c t i o n so ff a c e - t o f a c ec o m m u n i c a t i o n ，e m o t i o n a lr e l a t i o n sa n d i n t e r c u l t u r a lv a r i a t i o n i nt h i sa g eo fm u l t i m e d i a ，t h e r ei sa ni n c r e a s i n ga w a r e n e s st h a tm e a n i n gc o u l dn o t b em a d ew i t l ll a n g u a g ea l o n ei nm o s tc a s e s a n dt h i sm u s tb eu n d e r s t o o db yt a k i n g l a n g u a g e a ss o c i a ls e m i o t i c ( h a l l i d a y ，19 9 4 ) a n d “t a k i n gi n t oa c c o u n ta sm a n y m o d a l i t i e so fc o m m u n i c a t i o na sw ec a ns y s t e m a t i c a l l yd e s c r i b e ”( m a r t i na n dr o s e ， 2 0 0 3 ) t h i si sb e c a u s e ，“w el i v ei na m u l t i m o d a ls o c i e t y ，w h i c hm a k e sm e a n i n gt h r o u g h t h ec o e m p l o y m e n to fs e m i o t i cr e s o u r c e s ”( l i m ，2 0 0 4 ) t h e r ea r ep r o d u c t i v ea c c o u n t s o fi m a g e ( o t o o l e19 9 4 ；k r e s sa n dv a nl e e u w e n19 9 6 ；g o o d m a n19 9 6 ；j e w i t ta n d o y a m a2 0 01 ；s t e n g l i na n di d e m a2 0 01 ) ，m u s i ca n ds o u n d ( v a nl e e u w e n19 9 9 ) a n d a c t i o n ( m a r t i n e c19 9 8 ，2 0 0 0 ) a sar e s u l t ，m d ah a sb e c o m eav e r ye x c i t i n gr e s e a r c h f r o n t i e r t h e r ei sap r e s s i n gn e e dt ou n d e r s t a n dt h ed y n a m i c so fs e m i o s i si nm u l t i m o d a l d i s c o u r s es u c ha sf i l m a c a d e m i cd i s c i p l i n e ss u c ha sl i n g u i s t i c s ，w h i c hf o c u so n -3- 黑龙江大学硕士学位论文 m o n o m o d a l i t y ，a r ee n c o u r a g e dt od i a l o g u e 诵t l lo t h e rf i e l d so fr e s e a r c h ，f o ri n s t a n c e ， v i s u a lc o m m u n i c a t i o ns t u d i e sa n dm e d i as t u d i e s 1 2 2t h e o r e t i c a ir a t i o n a l e t h es t u d yo ft h em u l t i m o d a l i t yi nt h ee a r l i e rd a y sf o c u s e do nt h es t a t i ci m a g e s ， b e c a u s et h ed y n a m i cp r o c e s so fc o m m u n i c a t i o nc a u s e st h ei m m e d i a t ec h a n g e si nt h e s e m i o t i cm o d e sa n dt h e i rf u n c t i o n s k r e s sa n dv a nl e e u w e n ( 19 9 6 ，2 0 0 6 ) sr e a d i n g i m a g e s ：t h eg r a m m a ro fv i s u a ld e s i g ns e t su pag o o df o u n d a t i o no fv i s u a lg r a m m a r o h a l l o r a ni n s p i r e db yo t o o l e ( 1 9 9 4 ，1 9 9 9 ) sf r a m e w o r kf o rt h ea n a l y s i s