数字音频处理技术课件

1、数字音频处理技术,第四章 数字音频处理技术,任课老师：厉青,数字音频处理技术,本章重点：,声音概述 音乐合成与MIDI 数字音频压缩标准 数字音频处理实例,数字音频处理技术,人类听觉系统,数字音频处理技术,耳廓,外耳道,鼓膜,咽鼓管,耳蜗,鼓室,听小骨,外耳,数字音频处理技术,中耳,组成： 一、鼓 室 二、咽鼓管 三、乳突窦 乳突小房,数字音频处理技术,6,内耳,Cochlea 声音滤波为子带、机械能量转换为电能量 经听觉神经传送到大脑,数字音频处理技术,耳蜗: 实为蜗螺旋管环绕蜗轴约两圈半形成。蜗轴为耳蜗中央的骨松质，呈圆锥形。,数字音频处理技术,蜗管：的切面呈三角形，有上、外和下三个壁。上

2、壁为蜗管前庭壁（前庭膜），将前庭阶和蜗管隔开；外侧壁较厚，下壁由骨螺旋板和蜗管鼓壁（螺旋膜）组成，并与鼓阶相隔。,数字音频处理技术,22.06.2020,9,声波传导,数字音频处理技术,视听语言影像与声音,数字音频处理技术,一 声音发展的历史背景 二 声音的记录意义 三 声音空间 四 人声 五 自然音响 六 音乐 七 声音构成 八 影视创作中的声音处理,数字音频处理技术,一 声音发展的历史背景,声音发展的历史背景 有声电影的宣言 声音在影视作品中的作用 视听两种媒介在影视中的艺术效果,数字音频处理技术,声音发展的历史,默片时代：18951927 有声电影：1927爵士歌王标志着有声电影的诞生,

3、数字音频处理技术,默片时代电影的艺术特点： 蒙太奇语言的高度发展 演员高超的研究：卓别林的喜剧 字幕 默片的局限性 不符合人类视听觉综合感知信息的认识世界的客观规律 缺乏真实感 打断影片画面的节奏，影响电影的正常表达,数字音频处理技术,问题,在你投入地欣赏一部电影时，电影声音遏然而止，只有幅幅画面在你面前闪过，你感觉会是如何？你还能投入，继续为电影艺术的无穷魅力感慨连连吗？ 肯定? 否定?,数字音频处理技术,如果你的回答是肯定的，不奇怪！,1895年12月28日，卢米埃尔兄弟首次向人们展示神奇的电影艺术。 无数电影艺术家在镜头剪接、镜头拍摄、生动表演、表情的刻画等方面大下工夫，来演绎艺术 -

4、表情艺术。 1927年10月26日，艾伦克罗斯兰的爵士歌王在美国问世，促使整个电影工业向有声电影冲击。,数字音频处理技术,电唱机早先叫留声机，诞生于1877年。托马斯阿尔瓦爱迪生根据电话传话器里的膜板随着说话声会引起震动的现象，拿短针作了试验，从中得到很大的启发。说话的快慢高低能使短针产生相应的不同颤动。那么，反过来，这种颤动也一定能发出原先的说话声音。于是，他开始研究声音重发的问题。 1877年8月15日，托马斯阿尔瓦爱迪生让助手克瑞西按图样制出一台由大圆筒、曲柄、受话机和膜板组成的怪机器。托马斯阿尔瓦爱迪生指着这台怪机器对助手说：“这是一台会说话的机器”，他取出一张锡箔，卷在刻有螺旋槽纹的

5、金属圆筒上，让针的一头轻擦着锡箔转动，另一头和受话机连接。托马斯阿尔瓦爱迪生摇动曲柄，对着受话机唱起了“玛丽有只小羊羔，雪球儿似一身毛”。唱完后，把针又放回原处，轻悠悠地再摇动曲柄。接着，机器不紧不慢、一圈又一圈地转动着，唱起了“玛丽有只小羊羔”，与刚才托马斯阿尔瓦爱迪生唱的一模一样。在旁的助手们，碰到一架会说话的机器，竟然惊讶得说不出话来。 “会说话的机器”诞生的消息，轰动了全世界。 1877年12月，托马斯阿尔瓦爱迪生公开表演了留声机，外界舆论马上把他誉为“科学界之拿破仑波拿巴”，是19世纪最引人振奋的三大发明之一。即将开幕的巴黎世界博览会立即把它作为时新展品展出。就连当时美国总统海斯也在

6、留声机旁转了2个多小时。,数字音频处理技术,10年后，托马斯阿尔瓦爱迪生又把留声机上的大圆筒和小曲柄改进成类似时钟发条的装置，由马达带动一个薄薄的蜡制大圆盘转动的式样，留声机才广为普及。,数字音频处理技术,大都会,大都会 绝对是电影史上一部弥足珍贵的经典电影，它启发、影响后世的无数电影作品，也改写了电影史和电影文化。大都会是二十年代其中一部制作成本最高的电影，也是电影史上一出最具影响力的电影。不论是科学怪人，或是密码一一四、变种异煞，甚至是22世纪杀人网络，均可以看到大都会的影子，印证了这部经典电影对20世纪电影的重大影响。此外，1982年的电影2020以及1985年的妙想天开均可以找到大都会

7、中的哥德式摩天大厦和二分社会概念。大都会中别具一格的邪恶机械人，更启迪了星球大战内的机械人C-3PO的设计。由Rudolf Klein-Rogge饰演的Rotwang，亦成为三十年代及以后众多经典惊栗片中之疯狂科学家的参考造型。乐队Queen的音乐录像带Radio Ga Ga(1984) 更大量加插该片的精彩片段。 大都会 的故事背景为公元2026年，场景设计展现一幢幢哥德式摩天大厦，充满密集商业社会味道，俨如未来的“大都会”。社会上的居民被分为两个阶层：上层是住在富丽堂皇大厦内的策划者和思想家；下层则是劳动工人，为维持权贵的舒逸生活而奔波劳碌。整个城市由Johhan Joh Frederse

8、n (Alfred Abel饰演) 支配，并得到疯狂科学家 Rotwang (Rudolf Klein-Rogge饰演) 的协助。Fredersen 之子Freder (Gustav Fr?hlich饰演) 与善良又美丽的工人领袖Maria (Brigitte Helm饰演) 相恋，当他走到地下城时，为地下城的悲惨生活境况所震惊，决意加入Maria 的行列反抗权贵。Fredersen为保持社会秩序、维持低下阶层的工作，命令科学家Rotwang把机械人制成 Maria的型态以挑拨离间，最终酿成悲剧收场。 尽管2001年的大都会修复版获联合国教科文组织选定为世界文献遗产之一，该版本也不能算是完整版

9、本。大都会所散失的重要片段，一直石沉大海。直至2008年，一段16 毫米的底片在布宜诺斯艾利斯被发现及复修，弥补了大都会的 30分钟空白。翘首以待的观众终于可以在第34届香港国际电影节欣赏大都会的终极修复版。,数字音频处理技术,如果你的回答是肯定的，不奇怪！,当电影没有声音了，我们仍旧可以欣赏，欣赏它的画面，它的构思，它的除声音之外的因素。毕竟声音不是电影成其为艺术本初的东西，而只是它的一个手段，一色增彩，一副调味，极重要的调味。当然，如果你看的这部片子的导演很重画面剪辑表现，你会得到更大的享受。,数字音频处理技术,如果你的答案是否定的，那也不奇怪,声音的出现使电影表现生活更加逼真，为电影描写

10、生活开拓了一个新的领域，使电影从此成为完整的视听结合艺术。 使电影朝现实主义跨进了一大步。 使电影的表现力大大丰富了。（烘托环境气氛，表现不同的情调 - 情绪） 使蒙太奇的性质也起了变化，视觉上时空不统一的段落可以用实际的声音统一起来。,数字音频处理技术,声音的尝试应用 1910年，爱迪生展示了能够将画面和声音同时记录下来的带有声音的电影 1926年，华纳兄弟公司与通用电气公司开发出“维他风”的唱片伴音系统，并拍摄影片唐璜，但此时的声音仅局限于音乐的使用 1927年，华纳公司推出了由阿尔乔森主演的爵士歌王，在这部影片中不仅有音乐，还有一部分对白，被看作是电影史上第一部有声电影。 1928年，华

11、纳公司推出了纽约之光，这是一部具有完整对白的有声电影。,数字音频处理技术,声音在影片中的意义,电影表现手法的一次大变革，有声电影使电影成为了视听艺术 电影的真实性加强，更接近于生活，更具有逻辑性，表现也更加细腻 内在的运动更加丰富，尤其是展示内在情感运动的音乐和理性思维运动的语言的运用 蒙太奇的作用发生了变化，电影不在依赖蒙太奇来承担声音所要表达的内容 声音不在是画面的从属，而是作为一个平等因素参与其中，共同表现影视作品的意义,数字音频处理技术,早期声音的局限性,因为早期的拾音话筒体积大，无法随着演员移动，因而为了达到一定的声音效果，演员就需要尽可能的靠近话筒，从而束缚了演员的表演 同期录音使

12、得声音与画面同时记录在一张胶片上，因而剪辑时蒙太奇就受到了许多限制，影响到导演的艺术构想 为了消除同期录音中的噪音，电影的拍摄只能局限在小小的隔音空间中进行，因而就限制了摄影机的运动，束缚了运动镜头的使用 声音的滥用，使电影成了舞台的延伸，削弱了电影的艺术感，电影美学出现了倒退,数字音频处理技术,有声电影的宣言,1929年7月爱森斯坦、普多夫金、亚历山大洛夫 针对电影中声音的滥用 提出了声画对位的主张，即将声音纳入蒙太奇的元素，将声音看成是一个与视觉镜头同等地位的蒙太奇元素 将声音所具有的现实性和倾向性消融在蒙太奇构想中,数字音频处理技术,录音技术发展对影视声音创作的影响,60年代，磁性录音技

13、术的产生与应用，不仅音频效应好，而且具有高保真的特点。同期录音中增加了声音的丰富性、外景中的自然音响，以及音乐的特殊意义 70年代，采用多个话筒将环境中的不同声音分别录制，在后期进行艺术加工和合成，使得声音表现不仅层次丰富，而且富有表现力，声音调度的思想开始产生 90年代，电声技术和录音技术的发展大大突破了声音的记录作用,数字音频处理技术,声音在影视创作中的重要作用,影视作品通过人物的对白、内心独白等声音塑造人物形象，同时也实现创作者的主观表达 声音成为推动剧情发展的重要因素 刻画人物形象，表现情节发展：海上钢琴师 扩展画面的表现内容,数字音频处理技术,二 声音的记录意义,声音与记录之间的关系

14、 声音的记录意义 新闻报道与纪录片中的声音记录性,数字音频处理技术,声音与记录之间的关系,视听语言的根本属性是记录性，这种记录性不仅要求视觉的真实，而且还要求听觉的真实 影视作品中的声音是对现实声音的记录,数字音频处理技术,声音的记录意义,声音是通过声波刺激人的生理器官，从而引起人的现实感受，实现传播的目的 完全反映了现实的声音形态，因而不同于舞台的音响效果,数字音频处理技术,新闻报道与纪录片中的声音记录性,声音是构成真实不可或缺的部分，因而在新闻报道和纪录片的拍摄中，同期声的录制是忠于现实的一种责任,数字音频处理技术,忽视声音记录意义的原因,同期录音的技术上要求高 同期录音的制作成本高 故事

15、片与商业片中美学原则的影响 “视觉为主，听觉为辅”认识论的误导：巴赞理论 传统思维的干扰：解说词的滥用,数字音频处理技术,三 声音空间,声音的物理属性 作为语言的声音空间 影视创作中声音空间的营造,数字音频处理技术,声音的物理属性,声音，也被称为声波,声波是一切可发声的物体（声源）在振动时，压缩空气，使空气的密度形成疏密相间的状态，由声源向四面八方传播的波。 声波传入人耳，使鼓膜振动，就引起声音的感觉。,数字音频处理技术,声音的物理属性,声波是一种机械波需要介质，而且传播介质的不同，声音的传播速度也不同 声波是一种纵波介质的质点振动方向与声波的传播方向在同一直线上 声波是一种能量声波的传播是能

16、量的转移过程 声波有反射、衍射的现象 声音中的多普勒效应与幻觉,数字音频处理技术,指波在传播过程中，遇到障碍物或缝隙时传播方向发生变化的现象。水波、声波、光波都能发生衍射现象。障碍物或缝隙的宽度越小，而波长越大，则衍射现象就越明显。波绕过障碍物或通过小孔绕到障碍物的背后。这种波能绕过障碍物继续传播的现象，叫“波的衍射”。室内发出声波可以绕过门、窗而到达室外的各角落。如果障碍物或缝隙的宽度远远超过波长时，波的衍射现象就不明显。,数字音频处理技术,作为语言的声音空间,声音具有空间的特征，声音可以表征它所出的空间的特点 声音加强了影视空间的立体感、层次感和运动感 声音是构成画外空间最有力的手段之一

17、声音还能传达画外空间的性质,数字音频处理技术,影视创作中声音空间的营造,利用声波的反射与衍射，制造出混响的声音效果，以表现特定的空间特征，以及人物的内心世界与情感 声音的透视规律以及多普勒效应使得影视创作中的声音更加符合人的视听感知经验,数字音频处理技术,声音空间创造应注意的问题 1 声音空间的创造必须要保持声音空间的性质，也就是说，影视作品中的声音必须是对真实声音空间的记录或模拟，否则会破坏幻觉效果。 2 正确处理声音与空间之间的关系。即可以根据空间来设计声音，也可以根据声音去选择与安排空间,数字音频处理技术,声音的分类,人声,自然音响,音乐,人声的音高、音色、力度、节奏,对白,内心独白,解

18、说词,数字音频处理技术,人声,人声是指人在表达思想和喜怒哀乐等情感时，所发出的具有音调、音色、力度、节奏等特征的声音。简单来说就是人物的语言，这是影视作品反映现实生活和塑造艺术形象的重要手段。,数字音频处理技术,人声的构成,音色、音高、力度、节奏和语气 对白 内心独白 旁白与解说词,数字音频处理技术,音高：是人耳对声音调子高低的主观评价尺度。它的客观评价尺度是声波的频率。和音强与振幅的关系不一样，音高与频率基本上是一致的。 音色：决定于乐音的泛音（谐波）频谱，也可以说是乐音的波形所确定的。如单簧管、圆号虽然演奏同一音高（基频）的音符，但人们能够明确分辨出哪个是单管管，哪个是圆号，而不会混淆。,

19、数字音频处理技术,音色、音高、力度、节奏和语气的作用,表现人物的情感特征 创造真实感 后期配音存在的问题,数字音频处理技术,对白,对白，又称对话，是指影视中人物之间进行交流的语言。它是影视中使用最多，也是最为重要的语言内容。 对白的作用 交代剧情 塑造人物形象，展示人物性格：简爱 传达潜台词的丰富内涵：手机,数字音频处理技术,你开会呢吧？对。 说话不方便吧？啊。 那我说你听。行。 我想你了。噢。 你想我了吗？啊。 你亲我一下。不敢吧？那我亲你一下。听见了吗？听见了。 费老：做人要厚道 手机,数字音频处理技术,对白的特点 有控制的艺术语言 不允许有舞台的感觉和舞台的限制 演员用生活化的气息和自然

20、的状态说话，不能有夸张与做作,数字音频处理技术,对白与其他语言形式之间的区别,对白与口语之间的区别 对白具有与口语相似的作用，但不完全相同。口语部要求严谨和精确，但对白带有艺术的精确性。 对白与书面语言的不同 书面语言要求内容的完整性，以及节奏、韵律等，对白这是人和人之间的语言交流，对内容的完整性、节奏、韵律没有固定的要求,数字音频处理技术,对白与戏剧中的对话之间的区别 由于戏剧是对话的艺术，戏剧中的对话要承担叙事的功能，因而戏剧中的对话必须是夸张的；电影中的对白叙事功能是有限的，因而对白不需要夸张，反而要求收敛 语言事戏剧意义的主要表达方式，因而语言具有刻意的追求装饰性的特点；电影中的对白不

21、是唯一的表达方式，并且视听媒介的记录性使得它不需要装饰性,数字音频处理技术,内心独白,独白是指剧中人物在画面中对内心活动所进行的自我表述。 内心独白是影视艺术中以“画外音”形式出现的剧中人物的内心自白。 内心独白是直接的内心言语，它是直接表现心理世界的一种方法，是人物对外部世界的一种心理体验 内心独白要传达的不是外部世界所看到和听到的视听因素，而是人物内心思想、情感的一种表现形成,数字音频处理技术,内心独白的形式,人物在超叙事时空中的内心声音内心独白往往可以表现出画面所无法表达，而又不能通过对白来表达的人物隐秘的情感，有利于对人物的塑造：哈姆雷特 人物兼叙事者在非叙事时空中对事件的主观评价,数

22、字音频处理技术,解说词,解说词，又称为旁白，是影视作品中最为客观的一种声音，它和内心独白均属于画外音。,画外音是指声源在画面以外的声音,数字音频处理技术,在叙事类影视作品中，常使用旁白这个概念 在非叙事类影片中，如新闻片、纪录片中，常使用解说词这个概念,数字音频处理技术,叙事类影视作品中的旁白,旁白与内心独白的区别 旁白是以局外人的身份，并以一种纯客观的态度来说话，是影视作品蒙上一层理智与冷静的色彩。 旁白的发出者比较自由，既可以是影片中某一个人物，也可以是与剧情毫无关系或完全没有出现过的局外人 旁白的发出者不能与剧中人物做交流，而是从单项角度向观众叙述，把观众作为交流和倾诉的对象,数字音频处

23、理技术,旁白的类型,剧中人物的主观叙述：交代故事发生的时间、地点、人物、背景等。（说话人的形象可以出现在画面内，也可以是在画面外，但声音一定是画外音） 完全独立的局外人的客观叙述，属议论或评价性的旁白，一般以第三人称呈现，介绍、评说、议论剧中人物的故事,数字音频处理技术,旁白的作用,影视作品的导演常借助于旁白来表达自己的创作理念、人生理念，并借此来传达自己独特的艺术风格 旁白是影视作品的“粘合剂”，起到的只是辅助作用，不能使用过度。否则会破坏作品的完整和顺畅，影响作品的质量。,数字音频处理技术,旁白的叙事功能首要功能，推动影片的发展 “全知叙事”方式 “限知叙事”方式 实现时间和空间的转换 体

24、现导演的个人风格,数字音频处理技术,全知叙事方式：常规影视剧的基本叙事语态。在这类影片中，旁白通常比被叙述的人物知道得多。旁白能够知道被叙述人物的所有秘密，先于被叙述人物知道他们的命运。旁白是观众提前了解到人物的部分命运的发展，进而引起关注的关注和心理的紧张。事实上，这种旁白是带有导演主观意图的，是导演有目的的引导观众，吸引观众的视线。,数字音频处理技术,限知叙事方式：旁白不再处于居高临下的位置，更多的情况下他是影片人物中的普通一员。对于未发生的事情不能预知，对他人内心的秘密也无从把握。旁白的作用在于推进故事的发展，而这种限知也使影片产生复杂、多变的含义，给观众留下更多的悬念，同时，也是银幕世

25、界变得越发真实可信。,数字音频处理技术,解说词,以画外音形式出现的旁白出现在非叙事类的影视作品中，通常被称为“解说词”。 “解说词”是非叙事时空的创作者对叙事时空的时间或人物的评价或解释。 解说词常用语非虚构的影视作品中，如纪录片、专题片、新闻片、科教片和政论片等，用来解说、串联画面、阐释主题。,数字音频处理技术,解说词的形式,独立于影片之外，以第三者的形象出现，使人产生客观、权威的感觉 以片中主人公的讲述作为解说词 以第三者的身份出场，但带有明显的个人色彩，语言带有浓厚的生活气息,数字音频处理技术,电视解说词的重要功能,功能之一弥补画面不足，完善影视的形象报道 1 对于事件发生的历史背景、时

26、代背景和总体社会环境的介绍 2 对新闻事件各个要素的介绍，对人物关系和事件各方面联系的介绍 3 通过解说调动观众的想象力，从而感受到创作者的意图,数字音频处理技术,功能之二整合画面信息，创造明确的指示关系 1 放大画面的信息点，强调突出关键性细节 2 对无序的画面信息进行整合，对多义的画面进行指向性的规定和引导,数字音频处理技术,功能之三挖掘画面内涵，丰富提升画面的表现力 功能之四调动观众的想像和联想 功能之五连接画面，顺利过渡转场 功能之六直接抒发感情，阐述道理,解说作用的发挥，解说的处理和安排，都不是孤立进行的，一定要注意与其他手段相配合，以充分发挥电视解说的优势。,数字音频处理技术,解说

27、词与画面之间的关系,解说词不是对画面的简单重复，而是拓展画面的画外时空 解说词和画面能形成新的叙事结构,数字音频处理技术,解说词创作的要求,解说词要与其他的声音元素形成有机的声音整体 解说词不是对画面的图解 解说词不需要修饰性的语言 解说词的运用要适度,数字音频处理技术,纪录片中的解说词存在的问题,1、“先写解说词”忽略了“记录性”、“创造性” 纪录片的美学原则是记录和发现真实，而不是创造幻觉 2、借助于解说词表达大量的信息忽略了解说词与画面之间的关系 人类获知信息的方式是多样的，视觉与听觉的联合 解说词是画面信息的补充，它不能代替画面信息 3、解说词与其他视听元之间的关系,数字音频处理技术,

28、自然音响,自然音响是指在电影时空关系中所出现的自然界和人造环境中声音的统称。 自然音响包括动作音响、自然声、机械声、环境声、特殊声音等。 动作音响：人和动物行动所产生的声音 自然音响：自然界中非人的行为动作所发出的声音 背景音响：作为环境和背景出现的嘈杂人声或音乐等 机械音响：因机械设备的运行所发出的声音 特殊音响：经过变形处理的非自然界的音响等,数字音频处理技术,自然音响的作用,自然音响传递着与运动和环境同步的信息 自然音响增强了环境的真实性，是构成画外空间的重要手段 自然音响渲染了画面的氛围，弥补了画面的局限：如视觉冲击力不足 自然音响还可以体现人物的情绪和性格,数字音频处理技术,音响可以

29、表现人物的心境 音响可以增强紧张感、恐怖感，引发观众的情绪效果 表达人物情绪，创造特定的氛围，从而具有叙事的功能 通过主观化处理和超现实的处理，音响可以用来强调人性真实本质或传达独特的象征意义和隐喻含义，以达到深化主题的作用,数字音频处理技术,音乐,音乐是最抽象的艺术，对音乐的感受在很大程度上取决于接受者的主观反映、爱好、习惯、听辨能力等 音乐所表达的思想与具体的声源没有直接的联系，但它却能准确、细腻地激起人们感情和情绪 音乐的情感是通过感情体现出来的，是感情的思想，它的内涵价值主要是决定氛围、神韵、表情和情绪。,数字音频处理技术,影视音乐的特征他律性,他律性是指受其他因素的限制。 分段陈述、

30、间断出现的不连贯形态 创作上受限制，必须根据影片的题材内容来进行构思创作，并且为剧情服务 整体上要与影片相伴而行，因而要与整部影片的艺术风格相统一，并要有助于创造丰满的银幕形象和表达人物的情感心理,数字音频处理技术,影视音乐的形式,出现的方式分：有声源音乐和无声源音乐 有声源音乐，也成为画内音乐。音乐是由画面中的有声源提供的，并且声源与画面是一致的 无声源音乐，也称为画外音乐。音乐不是来自于画面中可见的发声源，注重于心理活动、情绪情感的表达,数字音频处理技术,音乐声源形式看：器乐和声乐 器乐主要是指单纯由器乐演奏的音乐 声乐则是人声演唱结合器乐演奏的音乐：主题曲和插曲,数字音频处理技术,当一部

31、电影中，音乐达到了可观的篇幅和比例，那这部电影就比较接近纯粹的音乐电影形态，如音乐片和歌舞片。 在音乐片中，音乐不是单纯地作为外加手段为影片烘托气氛、抒情写意，而是巨作构思和剧情发展的主要部分，电影以音乐为核心线索贯穿全片。音乐之声雪绒花 歌舞片将歌曲与舞蹈作为主导方式，以表现歌舞场面为主。歌舞片的角色人物既可以按常规生活在现实的故事情节中，也可以随时中断情节，跳跃在理想浪漫的歌舞梦幻空间中，自由的穿梭于现实与理想之间。红磨坊,数字音频处理技术,音乐的功能,1、音乐可以表达语言和行动都无法表达的情感，创造情绪氛围：魂断蓝桥友谊地久天长 2、表现民族特征与地方特色：黄土地信天游 3、刻画人物的性

32、格和心理，传递创作者的主观意念：海上钢琴师 4、推动情节发展，成为电影叙事的重要组成部分：莫扎特、聂耳,数字音频处理技术,5、奠定整部影片的主体基调与影像风格：我的兄弟姐妹、城南旧事 6、制造恐怖效果 7、声画组接的作用：利用音乐奖几个不同的镜头连接起来，形成一种整体感：七宗罪,数字音频处理技术,电影中的音乐是整体声音元素的一个组成部分，与对白、旁白、音响共同构成了电影的听觉元素。音乐与其他的声音元素必须融入影片的整体视听构思之中，与视觉元素相结合，一同产生作用。 与独立的音乐形式相比，电影音乐在影片中通常不是连续不间断的出现的，在时间上有限制性。 电影音乐的作用是各种各样的，它可以烘托不同气

33、氛，描绘事物特征，表达创作者的主观评价，阐释画面内容，概括基本情绪，甚至可以创造思想并推动剧情发展。,数字音频处理技术,叙事时空内的音乐是存在于情节中，所以要注意音乐的真实性，这是由视听媒介的记录本性所决定的。 非叙事时空内的音乐，应该要表现特殊的画面意义，扩展画外空间。,数字音频处理技术,声画关系,现代影视是一门声画结合的艺术。 声音与画面共同构筑成影视空间和影视形象的艺术形态。 声音和画面是影视艺术语言的两大元素，这两大元素既相互独立又相互联系，既能交融相处，又存在一定矛盾。,数字音频处理技术,就银幕空间和银幕形象的塑造而言：画面与声音影视相辅相成，画面需要声音的支持，同时声音也离不开视觉

34、形象。 就表达情绪而言，由于画面与声音各自担任的职能极其自身的多义性，决定了不同的画面组合会产生不同的、甚至完全相反的情绪和含义。,数字音频处理技术,声画结合的形式,声音与画面的结合不是随意性的、杂乱无章的；而是有规律的、有技巧的。 声画结合的方式主要有： 声画同步 声画分离 声画对位,数字音频处理技术,声画同步,声画同步，也称声画合一，指影视中的声音和画面严格匹配，使发音的人或物体在银幕上与所发声音保持同步进行的自然关系，使得画面中视像的发声动作和它所发出的声音同时呈现，同时消失，两者吻合一致。 声画同步是最常见、最易被观众接受的声画关系。,数字音频处理技术,声画同步的作用 加强画面的真实感

35、，提高视觉形象的感染力：声音和画面同时作用于观众的感官，在心理上引起视听联觉的反应，使两种形象相互渗透，从而加深了对审美对象的实际感受，创造出真实的时空环境。 声画同步使影视艺术再现生活成为可能 影视中声音和画面作为听觉和视觉的基本要素，承担了叙事功能，可以将不同主观感情的叙事功能结合起来，极大地丰富了叙事的意义。,数字音频处理技术,声画分离,声画分离是指画面中的声音和形象不匹配、不同步、不吻合、互相分离，即声音和发声体不在同一个画面内，声音通常以画外音的形式出现。 声画分离意味着声音和形象具备相对的独立性，它们通过分离的形式，在新的基础上求的和谐统一。,数字音频处理技术,声画分离的作用 突出

36、了声音的作用：使声音从依附于形象的从属地位中解放出来，成为独立的艺术元素，从而丰富了影视的表现手段。 声画分离使得声音和画外具备了相对的独立性，从而能更好的调动影像色彩、构图的表现力和声音的时空、情感穿透力。 更好的发挥声音的主观化作用，将声音作为纽带，将不同场景、不同内容的画面组接起来，衔接剧情、转化时空，达到独特的叙事结构意义,数字音频处理技术,声画对位,声画对位是指声音和画面形象各自相互独立又相互作用的结构形式。 在形式上，声音和画面上不同步、不吻合、相互独立 在内容上，画面提供的信息和声音所传达的信息在性质和情绪基调上存在很大反差，甚至完全矛盾、独立 两者虽然相互独立，但又彼此对列、彼

37、此配合，从不同的角度为同一个人物塑造或主题表达所服务 声画对位可以描述成既分头并进，又殊途同归,数字音频处理技术,声画对位与声画分离的区别 声画分离只是强调影视中声音和画面在形式上的分离，而在内容表现上二者是一致的。 声画对位不仅是指声音和画面在形式上的分离，而且在内容上二者也没有统一性,数字音频处理技术,声画对位中声音的作用 声音既可以是人声，也可以是自然音响和音乐 声音成了一种蒙太奇元素，其主观和象征性为创作和欣赏提供了无限的创作和想象空间 打破时空界限，将现实与过去、欢乐与悲伤结合在一起，时空交错，今画昔声，相互映衬，以达到强烈而深刻的艺术效果,数字音频处理技术,声画对位的作用,产生某种

38、声画原来各自并不具备的新寓意，通过观众联想达到对比、想象、比喻等效果，给观众以全新、独特的审美感受，达到更高的故事叙述、人物刻画和主题阐释的境界。 承担冲突性较强的叙事任务 鲜明的描摹人物内心和营造独特氛围 形象的表达深刻的象征含义,数字音频处理技术,声音空间,电影系统,画面,声音,时间,空间,光线、色彩、明暗,人声、自然音响、音乐,数字音频处理技术,声音总谱,声音总谱是指电影中的人声、自然音响、音乐，相协调，共同传递信息，表达情感，从而构成声音总谱。,数字音频处理技术,声音构成的特点,声音构成是在一个立体的结构中展开的 声音构成在结构上是多层次的 声音构成要与视觉影像相呼应 声音构成中的声音

39、是具体的和现实的，不受音乐节奏等限制 声音构成既有时间特点，又有空间的特点,数字音频处理技术,声音构成与影视创作,声音构成首先要进行声音总谱的设计，即根据内容的要求将人声、自然音响和音乐纳入到一个总的声轨，并和视觉构成相结合，从而形成一个总的声音效果。,数字音频处理技术,声音构成的分类,线性的声音构成 各种声音在时间的序列中依次出现 非线性的声音构成 各种声音组合在一起，强调垂直方向的声音运动 非线性的声音构成虽然声音组合丰富，但如果持续时间过长，会使人产生烦躁,数字音频处理技术,声音构成的设置,选择什么声音 如何安排人声、自然音响和音乐 各种声音如何搭配 音乐开始的地方 音乐和画面的结合 音

40、乐的强度 解说词的使用 解说词间歇初的声音 音乐与自然音响的处理,数字音频处理技术,影视创作中的声音处理,电视剧：真实与幻觉 译制片的翻译 直播 电视新闻采访中的口型错位,数字音频处理技术,电视剧：真实与幻觉,声音是实现电视剧真实幻觉重要的表现手法 声音构成：人声、自然音响与音乐 声音的比例关系声音的运动关系 声音的透视关系,数字音频处理技术,译制片的翻译,传统的译制方式 字幕译制片,数字音频处理技术,传统的译制方式 配音演员根据原语言的意思和剧中演员的口型，配上相应的汉语对白 传统的译制方式的缺点 破坏了原语言的独特韵味：每一种语言都有独特的表情和表意特征：语言还带有非理性的情感 破坏了演员

41、表演的完整性 造成影片声音空间的损失,数字音频处理技术,字幕译制片 尊重了艺术的完整性,数字音频处理技术,直播,直播的发展历程 录播 直播 直播的特点 及时、快捷的播报信息 将观众带入报道现场，使之产生身临其境的感受,数字音频处理技术,直播的先决条件在于：时间发生的时间与节目制作的时间与接收者接受的时间是同步的 直播的意义: 结果的不可预测性与随意性,数字音频处理技术,假唱 假唱的目的在于控制和排除一切即兴因素，这与直播的意义背道而驰 假唱限制了表演者与接收者之间的双向交流，使积极互动变成了消极的机械传输,数字音频处理技术,热线电话 热线电话对实现直播的意义起到了积极的重要作用 但人为的控制使

42、得这种方式不仅破坏了直播的“此时此地”发展的具有一定随意性内容的直播意义，而且是双向的交流又变成了单向传输 热线电话忽略了言语中非理性因素：音高、节奏、语气等,数字音频处理技术,电视新闻采访中的口型错位,口型错位产生的原因 口型错位的危害,数字音频处理技术,口型错位产生的原因 拍摄时的同期录音，而在后期制作时将声音与画面分开编辑。在连续的声音中，为了避免视觉疲劳，将画面进行剪辑，从而产生口型错位,数字音频处理技术,口型错位产生的危害 破坏了电视新闻报道的真实性 削弱了电视的真实幻觉,数字音频处理技术,数字音频处理技术,数字音频处理技术,22.06.2020,111,数字音频处理技术,112,数

43、字音频处理技术,113,数字音频处理技术,114,数字音频处理技术,115,数字音频处理技术,116,数字音频处理技术,117,数字音频处理技术,118,数字音频处理技术,119,数字音频处理技术,120,数字音频处理技术,22.06.2020,121,数字音频处理技术,122,数字音频处理技术,123,数字音频处理技术,124,数字音频处理技术,125,数字音频处理技术,22.06.2020,126,数字音频处理技术,127,数字音频处理技术,128,数字音频处理技术,129,数字音频处理技术,130,数字音频处理技术,131,同期录音,能使演员的表情，情绪等因素和语言对白达到绝对的统一和同

44、步状态，相对于后期配音来说更加真实、生动。 决定同期录音声音的真实感的要素很多，能让观众有身临其境的感觉，必须特别注意 - 声音的距离感、空间感、环境感、运动感以及方位感。,数字音频处理技术,132,数字音频处理技术,133,同期录音套件,RODE NTG3 强制向电影级别话筒 RODE Blimp 防风三件套 美国Sound Device 3路调音台 加拿大Cavi 3米话筒杆 SONY 经典7506 监听耳机 5米/10米话筒线各一根,数字音频处理技术,134,实验室设备,RDE NTG-2 防风三件套RDE Blimp 话筒挑杆AKAR AK440 5米/10米话筒线各一根 数字录音机R

45、oland R-44,数字音频处理技术,135,数字音频处理技术,136,数字音频处理技术,137,数字音频处理技术,138,数字音频处理技术,139,数字音频处理技术,140,数字音频处理技术,141,数字音频处理技术,142,系统连接(Interconnection),转接头 插头(plug)和插口(jack) 转接头,数字音频处理技术,143,数字音频处理技术,144,数字音频处理技术,145,传声器(Microphone),适用最广泛的一种电声器件，作用是把人声和乐器声不失真地转换成电信号，送往调音台或放大器和处理器，最后从扬声器放出来。传声器是整个音响系统的第一环节，它的质量好坏和使

46、用是否得当，对整个系统的电声指标有着十分重要的影响。在整个音响系统各个组成部分的对比中，对音质影响最大的首先是扬声器（包括音箱），它对音质质量的影响比重达到5060%，其次是传声器，占2030%。,数字音频处理技术,146,Microphone Diaphragm,Most microphones have a diaphragm of some kind (lightweight plastic coated with metal particles) This vibrates in sympathy with sound vibrations,数字音频处理技术,147,传声器,数字音频处

47、理技术,148,传声器,动圈式话筒是依据电磁感应原理制成的，接受声波的膜片发生受迫振动，带动处于恒定磁场内的线圈，从而形成变化着的电信号。 电容话筒是依据接收声波的膜片构成电容，受迫振动后，其电容量发生变化从而产生变化着的电信号。,数字音频处理技术,149,话筒的指向性,话筒拾取音源方向的覆盖空间可以分成圆形、心形、超心形，双指向和强指向。,数字音频处理技术,150,话筒的指向性,圆形：为乐队拾音用。 心形、超心形：为语言、歌声拾音用。 双指向形：录音棚等。 强指向形：拾取一定方向的音源，而将环境噪声排斥在拾取空间之外，新闻采访常用。,数字音频处理技术,151,Multi-pattern mi

48、cs,Some microphones allow selection of response pattern Each response pattern can be represented as a polar response graph,数字音频处理技术,152,话筒的附件,支架、减震架： 坚固、牢靠 灵活、抗震,数字音频处理技术,153,话筒的附件,防风罩： 室内近距离拾音时防 止声源气流对振膜的 瞬间强气流冲击,数字音频处理技术,154,话筒的附件,防雨罩：室外雨雪天使用。 话筒车 ,数字音频处理技术,155,灵敏度 频率响应 指向性 非线性失真 瞬态特性 .,传声器的技术特性,数

49、字音频处理技术,156,录音控制室,数字音频处理技术,157,录音控制室,数字音频处理技术,158,录音室,数字音频处理技术,159,电影音乐录音室,数字音频处理技术,160,计算机游戏音频制作,数字音频处理技术,声音在本质上是一种机械振动，它通过空气传播到人耳，刺激神经后使大脑产生一种感觉。在一些专业场合，声音通常被称为声波或音频。,4.1 声音概述,数字音频处理技术,4.1 声音概述,声音在物理学上称之为声波，是通过一定介质（如空气、水等）传播的一种连续振动的波，也称为声波。 通常把频率范围为20Hz20kHz的信号称为音频信号。低于20Hz的信号为亚音信号或者称为次音信号；高于20kHz

50、的信号称为超音频信号，或称为超声波信号。,数字音频处理技术,数字音频处理技术,4.1 声音概述,数字音频处理技术,常见声源及其频率范围：,四级声音质量的频率范围,(AM),(FM),数字音频处理技术,声音的特征：,声音有3个重要指标即振幅、周期和频率。振幅是波的高低幅度，表示声音的强弱；周期指两个相邻波之间的时间长度；频率指每秒振动的次数，以Hz为单位。 声音的3要素是音调、音色、强度，它们分别与声波的频率、波形、振幅等相关,数字音频处理技术,4.2 数字化音频,声音信号是时间和幅度上都连续的模拟信号。而计算机只认识“0”和“1”，或者说计算机只能处理一个个数据，尽管数据量可能是巨大的。所以，

51、计算机处理声音的第一步是将声音数字化，将模拟信号变为数字信号。,数字音频处理技术,音频是一种连续变化的模拟信号,可用一条连续的曲线来表示，称为声波。因声波是在时间和幅度上都连续变化的量，我们称之为模拟量。 下面用声音录制软件记录的英文单词“Hello”的语音波形,数字音频处理技术,4.2.1音频的数字化,把模拟声音（音频）信号转换位数字化声音（音频）的过程称为声音（音频）的数字化，或称为模/数（A/D）变换。,数字音频处理技术,音频信号数字化,数字音频处理技术,1. 采样,在音频数字化过程中，采样指的是以固定的时间间隔T对模拟信号（音频信号）进行取值。固定的时间间隔T称为采样周期，1/T称为采

52、样频率（fs）。采样后得到的是一个离散时间信号。采样时间间隔T越短，也就是采样频率越高，声音数据在后期播放时保真度越好。,数字音频处理技术,2. 量化,采样后的音频信号需要经过量化，使信号幅度转变为有限的离散数值。这种由有限个数值组成的信号就称为离散幅度信号。 例如，假设输入电压的范围是0V7V，并假设它的取值只限定在0，1，2，7共8个值。如果采样得到的幅度值是1.2V，则它的取值就应是1V，如果采样得到的幅度值是2.6V，则它的取值就应是3V等。 这种数值就称为离散数值，即量化值。量化之后得到的是时间离散、幅度离散的数字信号。,数字音频处理技术,模拟音频的数字化过程,声音的采样和量化示意图

53、,数字音频处理技术,声音采样与量化过程示例,采样频率为1000Hz，10个量化等级的波形,数字音频处理技术,经过D/A转换器得到的信号波形(直线段的波形)有较大的失真,数字音频处理技术,采样率为2000Hz，量化等级为20的采样量化过程,数字音频处理技术,采样率为4000Hz，量化等级为40的采样量化过程,数字音频处理技术,经采样和量化后声音信号经编码后就成为数字音频信号，可以将其以文件形式保存在计算机的存储介质中，这样的文件一般称为数字声波文件。,数字音频处理技术,3. 编码,编码，即是将量化值表示成为二进制数的形式，以便于计算机存储和处理。例如，上面量化规定的8个取值，就可以用3位二进制数

54、表示，从000111，2V可以表示为001，3V可以表示位011，6V可以表示位101。 计算机可以对数字化之后的音频信号进行存储、编辑和处理，并可以还原成原始的波形进行播放，这个还原的过程称为解码，它是模/数（A/D）变换的逆过程，及数/模（D/A）变换。,数字音频处理技术,音频信号处理过程,3. 编码,数字音频处理技术,4.2.2 数字音频音质与数据量,采样频率和采样量化级数是数字化声音的两个最基本要求，直接影响数字化音频的质量和数据量。一般而言，采样频率越高声音失真越小，但用于存储音频的数据量也越大。量化位数越高音质越好，数据量越大。 通常有3中采样频率：44.1kHz（取样44 100

55、次每秒，用于CD品质的音乐）、22.05kHz（适用于语音和中等品质的音乐）、11.025kHz（低品质），量化精度分别为8位字长（256阶）量化（低品质）和16位字长（65 535阶）量化（高品质）。,数字音频处理技术,4.2.2 数字音频音质与数据量,反映音频数字化质量的另一个因素是通道（或声道）个数。一次采样一个声音波形，称为“单声道”；一次采样两个声音波形，称为“双声道”（即人们常说的立体声）。立体声更能反映人的听觉感受。但数据量比单声道多一倍，这样需要的存储空间是单声道的两倍。对声音的采样可以使用不同的采样频率、采样量化级数和声道，但实际上为了节省存储空间，经常要在数字化音频数据量的

56、的大小与声音回放质量之间进行权衡。,数字音频处理技术,声音信息数字化后的数据量计算公式为： 数据量=采样频率*量化位数*声道数/8 数据量的单位：B/s（字节/秒）,数字音频处理技术,音质与数字音频参数的关系,数字音频处理技术,4.2.3 数字音频文件格式,数字音频数据是以文件的形式保存在计算机中的。数字音频的文件格式主要又CD、WAVE、MP3、WMA、MIDI等。 CD文件：*.cda格式，采用44.1kHz的采样频率，速率为88kbps。具有16位量化位数，CD音轨近似无损，声音基本上终于忠于原声。 WAV文件：微软公司开发的一种声音文件格式，也称波形声音文件，是最早的数字音频格式，被W

57、indows平台及其应用程序广泛支持。,数字音频处理技术,4.2.3 数字音频文件格式,MP3音频文件：全称为MPEG-1 audio layer3，其压缩率为12：1。优势是在高压缩比的情况下，还能拥有优美的音质。它利用知觉音频编码技术，即利用了人耳的特性，消减音乐中人耳的特性，消减音乐中人耳听不到的成分，同时尽可能地维持原来的声音质量。 WMA文件：Windows Media Audio，通过减少数据流量但保持音质的方法来达到比MP3压缩率更高的目的。WMA的一个优点是压缩率高，一般都在18：1.其次，WMA的内容提供商可以加入防复制保护。,数字音频处理技术,4.2.3 数字音频文件格式,

58、MID：Musical Instrument Digital Interface，允许数字合成器和其他设备交换数据。MIDI文件格式由MIDI继承而来。MIDI文件并不是一段录制好的声音，而是记录声音的信息，每个音符记录为一个数字，然后是告诉声卡如何再现音乐的一组指令。1分钟MIDI音乐文件的大小只有510KB。 Real Audio：Real network推出的一种音乐压缩格式；它的压缩比可达到96 ：1 ，因此在网上比较流行。经过压缩的音乐文件可以通过速率为14.4kb/s的MODEM上网的计算机中流畅回放。,数字音频处理技术,数字音频的文件格式,常用音频格式,数字音频处理技术,1WAV

59、文件 WAV文件又称波形文件，是Microsoft公司的音频文件格式。WAV格式作为Microsoft的标准文件格式，用于保存Windows的音频信息资源，被Windows平台及其应用程序所广泛支持。 WAV文件来源于对声音的模拟波形的采样，并以不同的量化位数把这些采样点的值转换成二进制数，然后存入磁盘，这就产生了波形文件。 2VOC文件 VOC文件是Creative公司所使用的标准音频文件格式，也是声霸卡（Sound Blaster）所使用的音频文件格式，其文件结构与WAV文件类似。,音频文件的格式,数字音频处理技术,3MP3文件 符合MPEG音频格式的文件称为MPEG音频文件。 其压缩是一种有损压缩，根据压缩质量和编码复杂程度的不同可分为3层（MPEG A