第四章_数字音频处理技术ppt课件

.,数字音频处理技术,任课老师：陶涛,.,本章重点：,声音概述音乐合成与MIDI数字音频压缩标准数字音频处理实例,.,人类听觉系统,.,耳廓,外耳道,鼓膜,咽鼓管,耳蜗,鼓室,听小骨,外耳,.,中耳,组成：一、鼓室二、咽鼓管三、乳突窦乳突小房,.,6,内耳,Cochlea声音滤波为子带、机械能量转换为电能量经听觉神经传送到大脑,.,耳蜗:实为蜗螺旋管环绕蜗轴约两圈半形成。蜗轴为耳蜗中央的骨松质，呈圆锥形。,.,蜗管：的切面呈三角形，有上、外和下三个壁。上壁为蜗管前庭壁（前庭膜），将前庭阶和蜗管隔开；外侧壁较厚，下壁由骨螺旋板和蜗管鼓壁（螺旋膜）组成，并与鼓阶相隔。,.,29.04.2020,9,声波传导,.,视听语言影像与声音,.,一声音发展的历史背景二声音的记录意义三声音空间四人声五自然音响六音乐七声音构成八影视创作中的声音处理,.,一声音发展的历史背景,声音发展的历史背景有声电影的宣言声音在影视作品中的作用视听两种媒介在影视中的艺术效果,.,声音发展的历史,默片时代：18951927有声电影：1927爵士歌王标志着有声电影的诞生,.,默片时代电影的艺术特点：蒙太奇语言的高度发展演员高超的研究：卓别林的喜剧字幕默片的局限性不符合人类视听觉综合感知信息的认识世界的客观规律缺乏真实感打断影片画面的节奏，影响电影的正常表达,.,问题,在你投入地欣赏一部电影时，电影声音遏然而止，只有幅幅画面在你面前闪过，你感觉会是如何？你还能投入，继续为电影艺术的无穷魅力感慨连连吗？肯定?否定?,.,如果你的回答是肯定的，不奇怪！,1895年12月28日，卢米埃尔兄弟首次向人们展示神奇的电影艺术。无数电影艺术家在镜头剪接、镜头拍摄、生动表演、表情的刻画等方面大下工夫，来演绎艺术-表情艺术。1927年10月26日，艾伦克罗斯兰的爵士歌王在美国问世，促使整个电影工业向有声电影冲击。,.,电唱机早先叫留声机，诞生于1877年。托马斯阿尔瓦爱迪生根据电话传话器里的膜板随着说话声会引起震动的现象，拿短针作了试验，从中得到很大的启发。说话的快慢高低能使短针产生相应的不同颤动。那么，反过来，这种颤动也一定能发出原先的说话声音。于是，他开始研究声音重发的问题。1877年8月15日，托马斯阿尔瓦爱迪生让助手克瑞西按图样制出一台由大圆筒、曲柄、受话机和膜板组成的怪机器。托马斯阿尔瓦爱迪生指着这台怪机器对助手说：“这是一台会说话的机器”，他取出一张锡箔，卷在刻有螺旋槽纹的金属圆筒上，让针的一头轻擦着锡箔转动，另一头和受话机连接。托马斯阿尔瓦爱迪生摇动曲柄，对着受话机唱起了“玛丽有只小羊羔，雪球儿似一身毛”。唱完后，把针又放回原处，轻悠悠地再摇动曲柄。接着，机器不紧不慢、一圈又一圈地转动着，唱起了“玛丽有只小羊羔”，与刚才托马斯阿尔瓦爱迪生唱的一模一样。在旁的助手们，碰到一架会说话的机器，竟然惊讶得说不出话来。“会说话的机器”诞生的消息，轰动了全世界。1877年12月，托马斯阿尔瓦爱迪生公开表演了留声机，外界舆论马上把他誉为“科学界之拿破仑波拿巴”，是19世纪最引人振奋的三大发明之一。即将开幕的巴黎世界博览会立即把它作为时新展品展出。就连当时美国总统海斯也在留声机旁转了2个多小时。,.,10年后，托马斯阿尔瓦爱迪生又把留声机上的大圆筒和小曲柄改进成类似时钟发条的装置，由马达带动一个薄薄的蜡制大圆盘转动的式样，留声机才广为普及。,.,大都会,大都会绝对是电影史上一部弥足珍贵的经典电影，它启发、影响后世的无数电影作品，也改写了电影史和电影文化。大都会是二十年代其中一部制作成本最高的电影，也是电影史上一出最具影响力的电影。不论是科学怪人，或是密码一一四、变种异煞，甚至是22世纪杀人网络，均可以看到大都会的影子，印证了这部经典电影对20世纪电影的重大影响。此外，1982年的电影2020以及1985年的妙想天开均可以找到大都会中的哥德式摩天大厦和二分社会概念。大都会中别具一格的邪恶机械人，更启迪了星球大战内的机械人C-3PO的设计。由RudolfKlein-Rogge饰演的Rotwang，亦成为三十年代及以后众多经典惊栗片中之疯狂科学家的参考造型。乐队Queen的音乐录像带RadioGaGa(1984)更大量加插该片的精彩片段。大都会的故事背景为公元2026年，场景设计展现一幢幢哥德式摩天大厦，充满密集商业社会味道，俨如未来的“大都会”。社会上的居民被分为两个阶层：上层是住在富丽堂皇大厦内的策划者和思想家；下层则是劳动工人，为维持权贵的舒逸生活而奔波劳碌。整个城市由JohhanJohFredersen(AlfredAbel饰演)支配，并得到疯狂科学家Rotwang(RudolfKlein-Rogge饰演)的协助。Fredersen之子Freder(GustavFr?hlich饰演)与善良又美丽的工人领袖Maria(BrigitteHelm饰演)相恋，当他走到地下城时，为地下城的悲惨生活境况所震惊，决意加入Maria的行列反抗权贵。Fredersen为保持社会秩序、维持低下阶层的工作，命令科学家Rotwang把机械人制成Maria的型态以挑拨离间，最终酿成悲剧收场。尽管2001年的大都会修复版获联合国教科文组织选定为世界文献遗产之一，该版本也不能算是完整版本。大都会所散失的重要片段，一直石沉大海。直至2008年，一段16毫米的底片在布宜诺斯艾利斯被发现及复修，弥补了大都会的30分钟空白。翘首以待的观众终于可以在第34届香港国际电影节欣赏大都会的终极修复版。,.,如果你的回答是肯定的，不奇怪！,当电影没有声音了，我们仍旧可以欣赏，欣赏它的画面，它的构思，它的除声音之外的因素。毕竟声音不是电影成其为艺术本初的东西，而只是它的一个手段，一色增彩，一副调味，极重要的调味。当然，如果你看的这部片子的导演很重画面剪辑表现，你会得到更大的享受。,.,如果你的答案是否定的，那也不奇怪,声音的出现使电影表现生活更加逼真，为电影描写生活开拓了一个新的领域，使电影从此成为完整的视听结合艺术。使电影朝现实主义跨进了一大步。使电影的表现力大大丰富了。（烘托环境气氛，表现不同的情调-情绪）使蒙太奇的性质也起了变化，视觉上时空不统一的段落可以用实际的声音统一起来。,.,声音的尝试应用1910年，爱迪生展示了能够将画面和声音同时记录下来的带有声音的电影1926年，华纳兄弟公司与通用电气公司开发出“维他风”的唱片伴音系统，并拍摄影片唐璜，但此时的声音仅局限于音乐的使用1927年，华纳公司推出了由阿尔乔森主演的爵士歌王，在这部影片中不仅有音乐，还有一部分对白，被看作是电影史上第一部有声电影。1928年，华纳公司推出了纽约之光，这是一部具有完整对白的有声电影。,.,声音在影片中的意义,电影表现手法的一次大变革，有声电影使电影成为了视听艺术电影的真实性加强，更接近于生活，更具有逻辑性，表现也更加细腻内在的运动更加丰富，尤其是展示内在情感运动的音乐和理性思维运动的语言的运用蒙太奇的作用发生了变化，电影不在依赖蒙太奇来承担声音所要表达的内容声音不在是画面的从属，而是作为一个平等因素参与其中，共同表现影视作品的意义,.,早期声音的局限性,因为早期的拾音话筒体积大，无法随着演员移动，因而为了达到一定的声音效果，演员就需要尽可能的靠近话筒，从而束缚了演员的表演同期录音使得声音与画面同时记录在一张胶片上，因而剪辑时蒙太奇就受到了许多限制，影响到导演的艺术构想为了消除同期录音中的噪音，电影的拍摄只能局限在小小的隔音空间中进行，因而就限制了摄影机的运动，束缚了运动镜头的使用声音的滥用，使电影成了舞台的延伸，削弱了电影的艺术感，电影美学出现了倒退,.,有声电影的宣言,1929年7月爱森斯坦、普多夫金、亚历山大洛夫针对电影中声音的滥用提出了声画对位的主张，即将声音纳入蒙太奇的元素，将声音看成是一个与视觉镜头同等地位的蒙太奇元素将声音所具有的现实性和倾向性消融在蒙太奇构想中,.,录音技术发展对影视声音创作的影响,60年代，磁性录音技术的产生与应用，不仅音频效应好，而且具有高保真的特点。同期录音中增加了声音的丰富性、外景中的自然音响，以及音乐的特殊意义70年代，采用多个话筒将环境中的不同声音分别录制，在后期进行艺术加工和合成，使得声音表现不仅层次丰富，而且富有表现力，声音调度的思想开始产生90年代，电声技术和录音技术的发展大大突破了声音的记录作用,.,声音在影视创作中的重要作用,影视作品通过人物的对白、内心独白等声音塑造人物形象，同时也实现创作者的主观表达声音成为推动剧情发展的重要因素刻画人物形象，表现情节发展：海上钢琴师扩展画面的表现内容,.,二声音的记录意义,声音与记录之间的关系声音的记录意义新闻报道与纪录片中的声音记录性,.,声音与记录之间的关系,视听语言的根本属性是记录性，这种记录性不仅要求视觉的真实，而且还要求听觉的真实影视作品中的声音是对现实声音的记录,.,声音的记录意义,声音是通过声波刺激人的生理器官，从而引起人的现实感受，实现传播的目的完全反映了现实的声音形态，因而不同于舞台的音响效果,.,新闻报道与纪录片中的声音记录性,声音是构成真实不可或缺的部分，因而在新闻报道和纪录片的拍摄中，同期声的录制是忠于现实的一种责任,.,忽视声音记录意义的原因,同期录音的技术上要求高同期录音的制作成本高故事片与商业片中美学原则的影响“视觉为主，听觉为辅”认识论的误导：巴赞理论传统思维的干扰：解说词的滥用,.,三声音空间,声音的物理属性作为语言的声音空间影视创作中声音空间的营造,.,声音的物理属性,声音，也被称为声波,声波是一切可发声的物体（声源）在振动时，压缩空气，使空气的密度形成疏密相间的状态，由声源向四面八方传播的波。声波传入人耳，使鼓膜振动，就引起声音的感觉。,.,声音的物理属性,声波是一种机械波需要介质，而且传播介质的不同，声音的传播速度也不同声波是一种纵波介质的质点振动方向与声波的传播方向在同一直线上声波是一种能量声波的传播是能量的转移过程声波有反射、衍射的现象声音中的多普勒效应与幻觉,.,指波在传播过程中，遇到障碍物或缝隙时传播方向发生变化的现象。水波、声波、光波都能发生衍射现象。障碍物或缝隙的宽度越小，而波长越大，则衍射现象就越明显。波绕过障碍物或通过小孔绕到障碍物的背后。这种波能绕过障碍物继续传播的现象，叫“波的衍射”。室内发出声波可以绕过门、窗而到达室外的各角落。如果障碍物或缝隙的宽度远远超过波长时，波的衍射现象就不明显。,.,作为语言的声音空间,声音具有空间的特征，声音可以表征它所出的空间的特点声音加强了影视空间的立体感、层次感和运动感声音是构成画外空间最有力的手段之一声音还能传达画外空间的性质,.,影视创作中声音空间的营造,利用声波的反射与衍射，制造出混响的声音效果，以表现特定的空间特征，以及人物的内心世界与情感声音的透视规律以及多普勒效应使得影视创作中的声音更加符合人的视听感知经验,.,声音空间创造应注意的问题1声音空间的创造必须要保持声音空间的性质，也就是说，影视作品中的声音必须是对真实声音空间的记录或模拟，否则会破坏幻觉效果。2正确处理声音与空间之间的关系。即可以根据空间来设计声音，也可以根据声音去选择与安排空间,.,声音的分类,人声,自然音响,音乐,人声的音高、音色、力度、节奏,对白,内心独白,解说词,.,人声,人声是指人在表达思想和喜怒哀乐等情感时，所发出的具有音调、音色、力度、节奏等特征的声音。简单来说就是人物的语言，这是影视作品反映现实生活和塑造艺术形象的重要手段。,.,人声的构成,音色、音高、力度、节奏和语气对白内心独白旁白与解说词,.,音高：是人耳对声音调子高低的主观评价尺度。它的客观评价尺度是声波的频率。和音强与振幅的关系不一样，音高与频率基本上是一致的。音色：决定于乐音的泛音（谐波）频谱，也可以说是乐音的波形所确定的。如单簧管、圆号虽然演奏同一音高（基频）的音符，但人们能够明确分辨出哪个是单管管，哪个是圆号，而不会混淆。,.,音色、音高、力度、节奏和语气的作用,表现人物的情感特征创造真实感后期配音存在的问题,.,对白,对白，又称对话，是指影视中人物之间进行交流的语言。它是影视中使用最多，也是最为重要的语言内容。对白的作用交代剧情塑造人物形象，展示人物性格：简爱传达潜台词的丰富内涵：手机,.,你开会呢吧？对。说话不方便吧？啊。那我说你听。行。我想你了。噢。你想我了吗？啊。你亲我一下。不敢吧？那我亲你一下。听见了吗？听见了。费老：做人要厚道手机,.,对白的特点有控制的艺术语言不允许有舞台的感觉和舞台的限制演员用生活化的气息和自然的状态说话，不能有夸张与做作,.,对白与其他语言形式之间的区别,对白与口语之间的区别对白具有与口语相似的作用，但不完全相同。口语部要求严谨和精确，但对白带有艺术的精确性。对白与书面语言的不同书面语言要求内容的完整性，以及节奏、韵律等，对白这是人和人之间的语言交流，对内容的完整性、节奏、韵律没有固定的要求,.,对白与戏剧中的对话之间的区别由于戏剧是对话的艺术，戏剧中的对话要承担叙事的功能，因而戏剧中的对话必须是夸张的；电影中的对白叙事功能是有限的，因而对白不需要夸张，反而要求收敛语言事戏剧意义的主要表达方式，因而语言具有刻意的追求装饰性的特点；电影中的对白不是唯一的表达方式，并且视听媒介的记录性使得它不需要装饰性,.,内心独白,独白是指剧中人物在画面中对内心活动所进行的自我表述。内心独白是影视艺术中以“画外音”形式出现的剧中人物的内心自白。内心独白是直接的内心言语，它是直接表现心理世界的一种方法，是人物对外部世界的一种心理体验内心独白要传达的不是外部世界所看到和听到的视听因素，而是人物内心思想、情感的一种表现形成,.,内心独白的形式,人物在超叙事时空中的内心声音内心独白往往可以表现出画面所无法表达，而又不能通过对白来表达的人物隐秘的情感，有利于对人物的塑造：哈姆雷特人物兼叙事者在非叙事时空中对事件的主观评价,.,解说词,解说词，又称为旁白，是影视作品中最为客观的一种声音，它和内心独白均属于画外音。,画外音是指声源在画面以外的声音,.,在叙事类影视作品中，常使用旁白这个概念在非叙事类影片中，如新闻片、纪录片中，常使用解说词这个概念,.,叙事类影视作品中的旁白,旁白与内心独白的区别旁白是以局外人的身份，并以一种纯客观的态度来说话，是影视作品蒙上一层理智与冷静的色彩。旁白的发出者比较自由，既可以是影片中某一个人物，也可以是与剧情毫无关系或完全没有出现过的局外人旁白的发出者不能与剧中人物做交流，而是从单项角度向观众叙述，把观众作为交流和倾诉的对象,.,旁白的类型,剧中人物的主观叙述：交代故事发生的时间、地点、人物、背景等。（说话人的形象可以出现在画面内，也可以是在画面外，但声音一定是画外音）完全独立的局外人的客观叙述，属议论或评价性的旁白，一般以第三人称呈现，介绍、评说、议论剧中人物的故事,.,旁白的作用,影视作品的导演常借助于旁白来表达自己的创作理念、人生理念，并借此来传达自己独特的艺术风格旁白是影视作品的“粘合剂”，起到的只是辅助作用，不能使用过度。否则会破坏作品的完整和顺畅，影响作品的质量。,.,旁白的叙事功能首要功能，推动影片的发展“全知叙事”方式“限知叙事”方式实现时间和空间的转换体现导演的个人风格,.,全知叙事方式：常规影视剧的基本叙事语态。在这类影片中，旁白通常比被叙述的人物知道得多。旁白能够知道被叙述人物的所有秘密，先于被叙述人物知道他们的命运。旁白是观众提前了解到人物的部分命运的发展，进而引起关注的关注和心理的紧张。事实上，这种旁白是带有导演主观意图的，是导演有目的的引导观众，吸引观众的视线。,.,限知叙事方式：旁白不再处于居高临下的位置，更多的情况下他是影片人物中的普通一员。对于未发生的事情不能预知，对他人内心的秘密也无从把握。旁白的作用在于推进故事的发展，而这种限知也使影片产生复杂、多变的含义，给观众留下更多的悬念，同时，也是银幕世界变得越发真实可信。,.,解说词,以画外音形式出现的旁白出现在非叙事类的影视作品中，通常被称为“解说词”。“解说词”是非叙事时空的创作者对叙事时空的时间或人物的评价或解释。解说词常用语非虚构的影视作品中，如纪录片、专题片、新闻片、科教片和政论片等，用来解说、串联画面、阐释主题。,.,解说词的形式,独立于影片之外，以第三者的形象出现，使人产生客观、权威的感觉以片中主人公的讲述作为解说词以第三者的身份出场，但带有明显的个人色彩，语言带有浓厚的生活气息,.,电视解说词的重要功能,功能之一弥补画面不足，完善影视的形象报道1对于事件发生的历史背景、时代背景和总体社会环境的介绍2对新闻事件各个要素的介绍，对人物关系和事件各方面联系的介绍3通过解说调动观众的想象力，从而感受到创作者的意图,.,功能之二整合画面信息，创造明确的指示关系1放大画面的信息点，强调突出关键性细节2对无序的画面信息进行整合，对多义的画面进行指向性的规定和引导,.,功能之三挖掘画面内涵，丰富提升画面的表现力功能之四调动观众的想像和联想功能之五连接画面，顺利过渡转场功能之六直接抒发感情，阐述道理,解说作用的发挥，解说的处理和安排，都不是孤立进行的，一定要注意与其他手段相配合，以充分发挥电视解说的优势。,.,解说词与画面之间的关系,解说词不是对画面的简单重复，而是拓展画面的画外时空解说词和画面能形成新的叙事结构,.,解说词创作的要求,解说词要与其他的声音元素形成有机的声音整体解说词不是对画面的图解解说词不需要修饰性的语言解说词的运用要适度,.,纪录片中的解说词存在的问题,1、“先写解说词”忽略了“记录性”、“创造性”纪录片的美学原则是记录和发现真实，而不是创造幻觉2、借助于解说词表达大量的信息忽略了解说词与画面之间的关系人类获知信息的方式是多样的，视觉与听觉的联合解说词是画面信息的补充，它不能代替画面信息3、解说词与其他视听元之间的关系,.,自然音响,自然音响是指在电影时空关系中所出现的自然界和人造环境中声音的统称。自然音响包括动作音响、自然声、机械声、环境声、特殊声音等。动作音响：人和动物行动所产生的声音自然音响：自然界中非人的行为动作所发出的声音背景音响：作为环境和背景出现的嘈杂人声或音乐等机械音响：因机械设备的运行所发出的声音特殊音响：经过变形处理的非自然界的音响等,.,自然音响的作用,自然音响传递着与运动和环境同步的信息自然音响增强了环境的真实性，是构成画外空间的重要手段自然音响渲染了画面的氛围，弥补了画面的局限：如视觉冲击力不足自然音响还可以体现人物的情绪和性格,.,音响可以表现人物的心境音响可以增强紧张感、恐怖感，引发观众的情绪效果表达人物情绪，创造特定的氛围，从而具有叙事的功能通过主观化处理和超现实的处理，音响可以用来强调人性真实本质或传达独特的象征意义和隐喻含义，以达到深化主题的作用,.,音乐,音乐是最抽象的艺术，对音乐的感受在很大程度上取决于接受者的主观反映、爱好、习惯、听辨能力等音乐所表达的思想与具体的声源没有直接的联系，但它却能准确、细腻地激起人们感情和情绪音乐的情感是通过感情体现出来的，是感情的思想，它的内涵价值主要是决定氛围、神韵、表情和情绪。,.,影视音乐的特征他律性,他律性是指受其他因素的限制。分段陈述、间断出现的不连贯形态创作上受限制，必须根据影片的题材内容来进行构思创作，并且为剧情服务整体上要与影片相伴而行，因而要与整部影片的艺术风格相统一，并要有助于创造丰满的银幕形象和表达人物的情感心理,.,影视音乐的形式,出现的方式分：有声源音乐和无声源音乐有声源音乐，也成为画内音乐。音乐是由画面中的有声源提供的，并且声源与画面是一致的无声源音乐，也称为画外音乐。音乐不是来自于画面中可见的发声源，注重于心理活动、情绪情感的表达,.,音乐声源形式看：器乐和声乐器乐主要是指单纯由器乐演奏的音乐声乐则是人声演唱结合器乐演奏的音乐：主题曲和插曲,.,当一部电影中，音乐达到了可观的篇幅和比例，那这部电影就比较接近纯粹的音乐电影形态，如音乐片和歌舞片。在音乐片中，音乐不是单纯地作为外加手段为影片烘托气氛、抒情写意，而是巨作构思和剧情发展的主要部分，电影以音乐为核心线索贯穿全片。音乐之声雪绒花歌舞片将歌曲与舞蹈作为主导方式，以表现歌舞场面为主。歌舞片的角色人物既可以按常规生活在现实的故事情节中，也可以随时中断情节，跳跃在理想浪漫的歌舞梦幻空间中，自由的穿梭于现实与理想之间。红磨坊,.,音乐的功能,1、音乐可以表达语言和行动都无法表达的情感，创造情绪氛围：魂断蓝桥友谊地久天长2、表现民族特征与地方特色：黄土地信天游3、刻画人物的性格和心理，传递创作者的主观意念：海上钢琴师4、推动情节发展，成为电影叙事的重要组成部分：莫扎特、聂耳,.,5、奠定整部影片的主体基调与影像风格：我的兄弟姐妹、城南旧事6、制造恐怖效果7、声画组接的作用：利用音乐奖几个不同的镜头连接起来，形成一种整体感：七宗罪,.,电影中的音乐是整体声音元素的一个组成部分，与对白、旁白、音响共同构成了电影的听觉元素。音乐与其他的声音元素必须融入影片的整体视听构思之中，与视觉元素相结合，一同产生作用。与独立的音乐形式相比，电影音乐在影片中通常不是连续不间断的出现的，在时间上有限制性。电影音乐的作用是各种各样的，它可以烘托不同气氛，描绘事物特征，表达创作者的主观评价，阐释画面内容，概括基本情绪，甚至可以创造思想并推动剧情发展。,.,叙事时空内的音乐是存在于情节中，所以要注意音乐的真实性，这是由视听媒介的记录本性所决定的。非叙事时空内的音乐，应该要表现特殊的画面意义，扩展画外空间。,.,声画关系,现代影视是一门声画结合的艺术。声音与画面共同构筑成影视空间和影视形象的艺术形态。声音和画面是影视艺术语言的两大元素，这两大元素既相互独立又相互联系，既能交融相处，又存在一定矛盾。,.,就银幕空间和银幕形象的塑造而言：画面与声音影视相辅相成，画面需要声音的支持，同时声音也离不开视觉形象。就表达情绪而言，由于画面与声音各自担任的职能极其自身的多义性，决定了不同的画面组合会产生不同的、甚至完全相反的情绪和含义。,.,声画结合的形式,声音与画面的结合不是随意性的、杂乱无章的；而是有规律的、有技巧的。声画结合的方式主要有：声画同步声画分离声画对位,.,声画同步,声画同步，也称声画合一，指影视中的声音和画面严格匹配，使发音的人或物体在银幕上与所发声音保持同步进行的自然关系，使得画面中视像的发声动作和它所发出的声音同时呈现，同时消失，两者吻合一致。声画同步是最常见、最易被观众接受的声画关系。,.,声画同步的作用加强画面的真实感，提高视觉形象的感染力：声音和画面同时作用于观众的感官，在心理上引起视听联觉的反应，使两种形象相互渗透，从而加深了对审美对象的实际感受，创造出真实的时空环境。声画同步使影视艺术再现生活成为可能影视中声音和画面作为听觉和视觉的基本要素，承担了叙事功能，可以将不同主观感情的叙事功能结合起来，极大地丰富了叙事的意义。,.,声画分离,声画分离是指画面中的声音和形象不匹配、不同步、不吻合、互相分离，即声音和发声体不在同一个画面内，声音通常以画外音的形式出现。声画分离意味着声音和形象具备相对的独立性，它们通过分离的形式，在新的基础上求的和谐统一。,.,声画分离的作用突出了声音的作用：使声音从依附于形象的从属地位中解放出来，成为独立的艺术元素，从而丰富了影视的表现手段。声画分离使得声音和画外具备了相对的独立性，从而能更好的调动影像色彩、构图的表现力和声音的时空、情感穿透力。更好的发挥声音的主观化作用，将声音作为纽带，将不同场景、不同内容的画面组接起来，衔接剧情、转化时空，达到独特的叙事结构意义,.,声画对位,声画对位是指声音和画面形象各自相互独立又相互作用的结构形式。在形式上，声音和画面上不同步、不吻合、相互独立在内容上，画面提供的信息和声音所传达的信息在性质和情绪基调上存在很大反差，甚至完全矛盾、独立两者虽然相互独立，但又彼此对列、彼此配合，从不同的角度为同一个人物塑造或主题表达所服务声画对位可以描述成既分头并进，又殊途同归,.,声画对位与声画分离的区别声画分离只是强调影视中声音和画面在形式上的分离，而在内容表现上二者是一致的。声画对位不仅是指声音和画面在形式上的分离，而且在内容上二者也没有统一性,.,声画对位中声音的作用声音既可以是人声，也可以是自然音响和音乐声音成了一种蒙太奇元素，其主观和象征性为创作和欣赏提供了无限的创作和想象空间打破时空界限，将现实与过去、欢乐与悲伤结合在一起，时空交错，今画昔声，相互映衬，以达到强烈而深刻的艺术效果,.,声画对位的作用,产生某种声画原来各自并不具备的新寓意，通过观众联想达到对比、想象、比喻等效果，给观众以全新、独特的审美感受，达到更高的故事叙述、人物刻画和主题阐释的境界。承担冲突性较强的叙事任务鲜明的描摹人物内心和营造独特氛围形象的表达深刻的象征含义,.,声音空间,电影系统,画面,声音,时间,空间,光线、色彩、明暗,人声、自然音响、音乐,.,声音总谱,声音总谱是指电影中的人声、自然音响、音乐，相协调，共同传递信息，表达情感，从而构成声音总谱。,.,声音构成的特点,声音构成是在一个立体的结构中展开的声音构成在结构上是多层次的声音构成要与视觉影像相呼应声音构成中的声音是具体的和现实的，不受音乐节奏等限制声音构成既有时间特点，又有空间的特点,.,声音构成与影视创作,声音构成首先要进行声音总谱的设计，即根据内容的要求将人声、自然音响和音乐纳入到一个总的声轨，并和视觉构成相结合，从而形成一个总的声音效果。,.,声音构成的分类,线性的声音构成各种声音在时间的序列中依次出现非线性的声音构成各种声音组合在一起，强调垂直方向的声音运动非线性的声音构成虽然声音组合丰富，但如果持续时间过长，会使人产生烦躁,.,声音构成的设置,选择什么声音如何安排人声、自然音响和音乐各种声音如何搭配音乐开始的地方音乐和画面的结合音乐的强度解说词的使用解说词间歇初的声音音乐与自然音响的处理,.,影视创作中的声音处理,电视剧：真实与幻觉译制片的翻译直播电视新闻采访中的口型错位,.,电视剧：真实与幻觉,声音是实现电视剧真实幻觉重要的表现手法声音构成：人声、自然音响与音乐声音的比例关系声音的运动关系声音的透视关系,.,译制片的翻译,传统的译制方式字幕译制片,.,传统的译制方式配音演员根据原语言的意思和剧中演员的口型，配上相应的汉语对白传统的译制方式的缺点破坏了原语言的独特韵味：每一种语言都有独特的表情和表意特征：语言还带有非理性的情感破坏了演员表演的完整性造成影片声音空间的损失,.,字幕译制片尊重了艺术的完整性,.,直播,直播的发展历程录播直播直播的特点及时、快捷的播报信息将观众带入报道现场，使之产生身临其境的感受,.,直播的先决条件在于：时间发生的时间与节目制作的时间与接收者接受的时间是同步的直播的意义:结果的不可预测性与随意性,.,假唱假唱的目的在于控制和排除一切即兴因素，这与直播的意义背道而驰假唱限制了表演者与接收者之间的双向交流，使积极互动变成了消极的机械传输,.,热线电话热线电话对实现直播的意义起到了积极的重要作用但人为的控制使得这种方式不仅破坏了直播的“此时此地”发展的具有一定随意性内容的直播意义，而且是双向的交流又变成了单向传输热线电话忽略了言语中非理性因素：音高、节奏、语气等,.,电视新闻采访中的口型错位,口型错位产生的原因口型错位的危害,.,口型错位产生的原因拍摄时的同期录音，而在后期制作时将声音与画面分开编辑。在连续的声音中，为了避免视觉疲劳，将画面进行剪辑，从而产生口型错位,.,口型错位产生的危害破坏了电视新闻报道的真实性削弱了电视的真实幻觉,.,.,.,29.04.2020,111,.,112,.,113,.,114,.,115,.,116,.,117,.,118,.,119,.,120,.,29.04.2020,121,.,122,.,123,.,124,.,125,.,29.04.2020,126,.,127,.,128,.,129,.,130,.,131,同期录音,能使演员的表情，情绪等因素和语言对白达到绝对的统一和同步状态，相对于后期配音来说更加真实、生动。决定同期录音声音的真实感的要素很多，能让观众有身临其境的感觉，必须特别注意-声音的距离感、空间感、环境感、运动感以及方位感。,.,132,.,133,同期录音套件,RODENTG3强制向电影级别话筒RODEBlimp防风三件套美国SoundDevice3路调音台加拿大Cavi3米话筒杆SONY经典7506监听耳机5米/10米话筒线各一根,.,134,实验室设备,RDENTG-2防风三件套RDEBlimp话筒挑杆AKARAK4405米/10米话筒线各一根数字录音机RolandR-44,.,135,.,136,.,137,.,138,.,139,.,140,.,141,.,142,系统连接(Interconnection),转接头插头(plug)和插口(jack)转接头,.,143,.,144,.,145,传声器(Microphone),适用最广泛的一种电声器件，作用是把人声和乐器声不失真地转换成电信号，送往调音台或放大器和处理器，最后从扬声器放出来。传声器是整个音响系统的第一环节，它的质量好坏和使用是否得当，对整个系统的电声指标有着十分重要的影响。在整个音响系统各个组成部分的对比中，对音质影响最大的首先是扬声器（包括音箱），它对音质质量的影响比重达到5060%，其次是传声器，占2030%。,.,146,MicrophoneDiaphragm,Mostmicrophoneshaveadiaphragmofsomekind(lightweightplasticcoatedwithmetalparticles)Thisvibratesinsympathywithsoundvibrations,.,147,传声器,.,148,传声器,动圈式话筒是依据电磁感应原理制成的，接受声波的膜片发生受迫振动，带动处于恒定磁场内的线圈，从而形成变化着的电信号。电容话筒是依据接收声波的膜片构成电容，受迫振动后，其电容量发生变化从而产生变化着的电信号。,.,149,话筒的指向性,话筒拾取音源方向的覆盖空间可以分成圆形、心形、超心形，双指向和强指向。,.,150,话筒的指向性,圆形：为乐队拾音用。心形、超心形：为语言、歌声拾音用。双指向形：录音棚等。强指向形：拾取一定方向的音源，而将环境噪声排斥在拾取空间之外，新闻采访常用。,.,151,Multi-patternmics,SomemicrophonesallowselectionofresponsepatternEachresponsepatterncanberepresentedasapolarresponsegraph,.,152,话筒的附件,支架、减震架：坚固、牢靠灵活、抗震,.,153,话筒的附件,防风罩：室内近距离拾音时防止声源气流对振膜的瞬间强气流冲击,.,154,话筒的附件,防雨罩：室外雨雪天使用。话筒车,.,155,灵敏度频率响应指向性非线性失真瞬态特性.,传声器的技术特性,.,156,录音控制室,.,157,录音控制室,.,158,录音室,.,159,电影音乐录音室,.,160,计算机游戏音频制作,.,声音在本质上是一种机械振动，它通过空气传播到人耳，刺激神经后使大脑产生一种感觉。在一些专业场合，声音通常被称为声波或音频。,4.1声音概述,.,4.1声音概述,声音在物理学上称之为声波，是通过一定介质（如空气、水等）传播的一种连续振动的波，也称为声波。通常把频率范围为20Hz20kHz的信号称为音频信号。低于20Hz的信号为亚音信号或者称为次音信号；高于20kHz的信号称为超音频信号，或称为超声波信号。,.,.,4.1声音概述,.,常见声源及其频率范围：,四级声音质量的频率范围,(AM),(FM),.,声音的特征：,声音有3个重要指标即振幅、周期和频率。振幅是波的高低幅度，表示声音的强弱；周期指两个相邻波之间的时间长度；频率指每秒振动的次数，以Hz为单位。声音的3要素是音调、音色、强度，它们分别与声波的频率、波形、振幅等相关,.,4.2数字化音频,声音信号是时间和幅度上都连续的模拟信号。而计算机只认识“0”和“1”，或者说计算机只能处理一个个数据，尽管数据量可能是巨大的。所以，计算机处理声音的第一步是将声音数字化，将模拟信号变为数字信号。,.,音频是一种连续变化的模拟信号,可用一条连续的曲线来表示，称为声波。因声波是在时间和幅度上都连续变化的量，我们称之为模拟量。下面用声音录制软件记录的英文单词“Hello”的语音波形,.,4.2.1音频的数字化,把模拟声音（音频）信号转换位数字化声音（音频）的过程称为声音（音频）的数字化，或称为模/数（A/D）变换。,.,音频信号数字化,.,1.采样,在音频数字化过程中，采样指的是以固定的时间间隔T对模拟信号（音频信号）进行取值。固定的时间间隔T称为采样周期，1/T称为采样频率（fs）。采样后得到的是一个离散时间信号。采样时间间隔T越短，也就是采样频率越高，声音数据在后期播放时保真度越好。,.,2.量化,采样后的音频信号需要经过量化，使信号幅度转变为有限的离散数值。这种由有限个数值组成的信号就称为离散幅度信号。例如，假设输入电压的范围是0V7V，并假设它的取值只限定在0，1，2，7共8个值。如果采样得到的幅度值是1.2V，则它的取值就应是1V，如果采样得到的幅度值是2.6V，则它的取值就应是3V等。这种数值就称为离散数值，即量化值。量化之后得到的是时间离散、幅度离散的数字信号。,.,模拟音频的数字化过程,声音的采样和量化示意图,.,声音采样与量化过程示例,采样频率为1000Hz，10个量化等级的波形,.,经过D/A转换器得到的信号波形(直线段的波形)有较大的失真,.,采样率为2000Hz，量化等级为20的采样量化过程,.,采样率为4000Hz，量化等级为40的采样量化过程,.,经采样和量化后声音信号经编码后就成为数字音频信号，可以将其以文件形式保存在计算机的存储介质中，这样的文件一般称为数字声波文件。,.,3.编码,编码，即是将量化值表示成为二进制数的形式，以便于计算机存储和处理。例如，上面量化规定的8个取值，就可以用3位二进制数表示，从000111，2V可以表示为001，3V可以表示位011，6V可以表示位101。计算机可以对数字化之后的音频信号进行存储、编辑和处理，并可以还原成原始的波形进行播放，这个还原的过程称为解码，它是模/数（A/D）变换的逆过程，及数/模（D/A）变换。,.,音频信号处理过程,3.编码,.,4.2.2数字音频音质与数据量,采样频率和采样量化级数是数字化声音的两个最基本要求，直接影响数字化音频的质量和数据量。一般而言，采样频率越高声音失真越小，但用于存储音频的数据量也越大。量化位数越高音质越好，数据量越大。通常有3中采样频率：44.1kHz（取样44100次每秒，用于CD品质的音乐）、22.05kHz（适用于语音和中等品质的音乐）、11.025kHz（低品质），量化精度分别为8位字长（256阶）量化（低品质）和16位字长（65535阶）量化（高品质）。,.,4.2.2数字音频音质与数据量,反映音频数字化质量的另一个因素是通道（或声道）个数。一次采样一个声音波形，称为“单声道”；一次采样两个声音波形，称为“双声道”（即人们常说的立体声）。立体声更能反映人的听觉感受。但数据量比单声道多一倍，这样需要的存储空间是单声道的两倍。对声音的采样可以使用不同的采样频率、采样量化级数和声道，但实际上为了节省存储空间，经常要在数字化音频数据量的的大小与声音回放质量之间进行权衡。,.,声音信息数字化后的数据量计算公式为：数据量=采样频率*量化位数*声道数/8数据量的单位：B/s（字节/秒）,.,音质与数字音频参数的关系,.,4.2.3数字音频文件格式,数字音频数据是以文件的形式保存在计算机中的。数字音频的文件格式主要又CD、WAVE、MP3、WMA、MIDI等。CD文件：*.cda格式，采用44.1kHz的采样频率，速率为88kbps。具有16位量化位数，CD音轨近似无损，声音基本上终于忠于原声。WAV文件：微软公司开发的一种声音文件格式，也称波形声音文件，是最早的数字音频格式，被Windows平台及其应用程序广泛支持。,.,4.2.3数字音频文件格式,MP3音频文件：全称为MPEG-1audiolayer3，其压缩率为12：1。优势是在高压缩比的情况下，还能拥有优美的音质。它利用知觉音频编码技术，即利用了人耳的特性，消减音乐中人耳的特性，消减音乐中人耳听不到的成分，同时尽可能地维持原来的声音质量。WMA文件：WindowsMediaAudio，通过减少数据流量但保持音质的方法来达到比MP3压缩率更高的目的。WMA的一个优点是压缩率高，一般都在18：1.其次，WMA的内容提供商可以加入防复制保护。,.,4.2.3数字音频文件格式,MID：MusicalInstrumentDigitalInterface，允许数字合成器和其他设备交换数据。MIDI文件格式由MIDI继承而来。MIDI文件并不是一段录制好的声音，而是记录声音的信息，每个音符记录为一个数字，然后是告诉声卡如何再现音乐的一组指令。1分钟MIDI音乐文件的大小只有510KB。RealAudio：Realnetwork推出的一种音乐压缩格式；它的压缩比可达到96：1，因此在网上比较流行。经过压缩的音乐文件可以通过速率为14.4kb/s的MODEM上网的计算机中流畅回放。,.,数字音频的文件格式,常用音频格式,.,1WAV文件WAV文件又称波形文件，是Microsoft公司的音频文件格式。WAV格式作为Microsoft的标准文件格式，用于保存Windows的音频信息资源，被Windows平台及其应用程序所广泛支持。WAV文件来源于对声音的模拟波形的采样，并以不同的量化位数把这些采样点的值转换成二进制数，然后存入磁盘，这就产生了波形文件。2VOC文件VOC文件是Creative公司所使用的标准音频文件格式，也是声霸卡（SoundBlaster）所使用的音频文件格式，其文件结构与WAV文件类似。,音频文件的格式,.,3MP3文件符合MPEG音频格式的文件称为MPEG音频文件。其压缩是一种有损压缩，根据压缩质量和编码复杂程度的不同可分为3层（MPEGAudioLayer1/2/3），分别对应MP1、MP2和MP3这三种声音文件。CD音质的音乐，未经压缩需要10MB存储空间，而经过MP3压缩编码后只有1MB左右，其音质基本保持不失真。Internet的发展和普及，促进了MP3的流行，网络代替了传统唱片的传播途径。MP3凭借其优美的音质和高压缩比而成为最流行的音乐格式。MP3格式文件在播放时需要WINAMP等专门的工具软件。,音频文件的格式,.,4RealAudio文件RealAudio文件是RealNetworks公司开发的一种新型流式音频（StreamingAudio）文件格式；它包含在RealNetworks所制定的音频、视频压缩规范RealMedia中，主要用于在低速率的广域网上实时传输音频信息。支持RealAudio格式的文件有：.RA，.RM，.RAM。5AIFF文件AIFF是音频交换文件格式（AudioInterchangeFileFormat）的英文缩写，是苹果计算机公司开发的一种声音文件格式，被Macintosh平台及其应用程序所支持，其他专业音频软件包也同样支持这种格式。支持AIFF格式的文件为有.AIF，.AIFF。,音频文件的格式,.,（1）客观质量的度量对声波的测量包括评价值的测量、声源的测量和音质的测量，其测量与分析工作，是使用带计算机处理系统的高级声学测量仪器来完成。度量声音客观质量的一个主要指标是信噪比SNR（SignaltoNoiseRation），信噪比是有用信号与噪声之比的简称，其单位是分贝（dB）。信噪比越大，声音质量越好。,1音频质量的评价,.,（2）主观质量的度量采用客观标准方法很难真正评定编码器的质量，在实际评价中，主观的质量度量比客观质量的度量更为恰当和合理。主观的质量度量通常是对某编码器的输出的声音质量进行评价。例如播放一段音乐，记录一段话，然后重放给一批实验者听，再由实验者进行综合评定，得出平均判分（MeanOpnionScose，MOS）。,1音频质量的评价,.,（2）主观质量的度量,MOS标准,1音频质量的评价,.,（3）常用的数字化声音技术指标及音质,1音频质量的评价,.,1G.711本建议公布于1972年，它给出话音信号的编码的推荐特性。话音的取样率为8kHz，每个样值采用8位二进制编码，推荐使用A律和律编码。本建议中分别给出了A律和律的定义，它是将13位的PCM按A律，14位的PCM按律转换为8位编码。2G.721该建议公布于1984年，1986年作了进一步修订。采用自适应差值量化的算法对音频波形编码，数据率为32kb/s，用于把64kb/s的A律或律的PCM编码转换成32kb/s的ADPCM编码，实现对PCM信道的扩容。G.721和G.711标准都适用于2003400Hz窄带话音信号，可用于公共电话网。,数字音频编码标准,.,5MPEG中的音频编码国际标准化组织/国际电工委员会（ISO/IEC）所属WG11工作组，制定推荐了MPEG标准。已公布和正在讨论的标准有MPEGI，MPEGE，MPEGN，MPEGU。其中MPEGI标准对应于ISO/IEC11172-3（MPEG音频）。这部分规定了高质量音频编码方法、存储表示和解码方法。编码器的输入和解码器的输出与现存的PCM标准兼容。ISO/IEC11172视频、音频的总数据率为1.5Mb/s。音频使用的采样率为32kHz，44.lkHz和48kHz。编码输出的数据率有许多种，由相关的参数决定。,数字音频编码标准,.,6AC-3编码和解码AC-3音频编码标准起源于由美国的杜比（DOLBY）公司推出的DOLBYAC-1。AC-1应用的编码技术是自适应增量调制（ADM），它把20kHz的宽带立体声音频信号编码成512kb/s的数据流。AC-1曾在卫星电视和调频广播上得到广泛应用。1990年DOLBY实验室推出了立体声编码标准AC-2，应用在PC声卡和综合业务数字网等方面。1992年DOLBY实验室在AC-2的基础上，又开发了DOLBYAC-3的数字音频编码技术。,数字音频编码标准,.,6AC-3编码和解码AC-3提供了五个声道从20Hz到20kHz的全通带频，即正前方的左（L）、中（C）和右（R）