计算机多媒体介绍.ppt

第二部分多媒体应用基础,任课教师:姚瑞霞yaorx办公电话：62782934办公室：东主楼8区309室教务老师：戴音62773240,2,从一个报奖通知说起,一份国家级教学成果奖申报材料要求：除纸介质的申报材料外，须提供反映成果的视频光盘。光盘要求能在标准配置的计算机上播放，片长不超过15分钟（附解说词）。光盘上的视频材料要做成使用mpeg4格式压缩的avi视频文件和rm格式压缩的流媒体文件各一份。视频材料制作的技术标准是参考教育部现代远程教育技术标准体系和11项试用标准（简介）V1.0版制定的，包括音频、视频两部分的基本技术要求。,3,音频制作的技术要求,数字化音频的采样频率不低于11KHZ。量化位数大于8位。声道数为双声道。数字化音频要以WAV格式为主。用于欣赏的音乐为MP3格式。MIDI设备录制音乐使用MIDI式。音频数据要制作成REAL流媒体格式格式。,4,视频制作的技术要求,存储为mpeg4格式压缩的avi视频文件和rm格式压缩的流媒体文件。彩色视频素材每帧图像颜色数不低于256色。黑白视频素材每帧图像灰度级不低于128级。数字化音频要以WAV格式为主。视频类素材中的音频与视频图像有良好的同步。图像清晰，视频信号稳定，没有扭曲、晃动、抖动、闪耀等现象。视频采样使用、U、V分量采样模式，采样基准频率为13.5MHz。,5,多媒体应用教学目标,掌握多媒体技术基本概念：数字化（采样、量化）多媒体压缩编码国际标准JPEG（静态图像），MPEG（动态图像），MP3（音频）了解内容：多媒体文件的类型多媒体文件的常规处理多媒体技术的典型应用多媒体关键技术,6,内容提要,多媒体技术概述图像数字化音频数字化多媒体数据压缩数字图像文件类型数字音频文件类型多媒体技术的应用领域应用：数字图像的处理,7,概念：多媒体,媒体（Medium）在计算机领域中有两种含义：一种指用以存储信息的实体，如磁带、磁盘、光盘等。另一种指信息的载体（表现形式），如数字、文字、图像、图形、动画、视频、音频等。多媒体技术中的媒体是指后者。多媒体是融合两种或两种以上媒体的一种人机交互式信息交流和传播媒体。,8,概念：多媒体技术,多媒体技术是利用计算机通过文字、图像、图形、动画、音频、视频等多种信息形式的交互混合，以数字化的方式集成在一起，从而使计算机具有表现、处理、存储多媒体信息的综合能力和交互能力。,基本条件：以计算机技术为核心具有人机交互的特点多媒体技术所处理的多种媒体是逻辑关联的复合数据,9,多媒体关键技术,多媒体输入/输出技术多媒体数据压缩/解压缩技术多媒体专用芯片技术多媒体存储设备与技术多媒体数据管理技术多媒体通信技术,10,如何记录多媒体数据（声音）,留声机,一台由大圆筒、曲柄、受话机、短针、膜板和记录介质（蜡盘）组成的机器。原理：膜板随着说话声会引起震动，说话的快慢高低能使短针产生相应的不同颤动，蜡盘均速旋转，声音最终以蜡上划痕的深浅记录下来。将蜡盘固化，在一套反方向的装置上：盘转，短针上下高底不同地拉动一张膜板，膜板就“说出”记录的声音。,模拟录音和数字录音,11,模拟音频和数字音频,音频模拟信号,模拟音频技术通过模拟电压的幅度表示声音的强弱。模拟声音的录制是将代表声音波形的电信号转换到适当的媒体上。,声音波形示例,时间,振幅,12,模拟音频和数字音频,音频数字信号,声音信息的数字化过程是每隔一个时间间隔在模拟声音波形上取一个幅度值（称为采样，采样的时间间隔称为采样周期），并把采样得到的表示声音强弱的模拟电压用数字表示（称为量化）。,声音数字化,13,数字音频的两个要素,采样频率越高，数字化音频的质量也就越高。量化位数越大，对音频信号的采样精度就越高。,量化位数,采样频率,14,采样频率,采样频率根据奈奎斯特定理：要想不产生低频失真，则采样频率至少得是录制的最高频率的两倍。,人类的听力范围是20Hz20kHz，以“人们听不到失真”为限，采样频率至少得是20k240kHz。,原始波形,录制后的波形,15,量化位直接决定了采用多少个“台阶”来表示声波振幅的范围（动态范围）。每增加一个bit，表示声波振幅的台阶数就翻一番，并增加6dB的动态范围。量化位：常用的有8位、16位和32位，其中以16位为主。,量化位数,量化位数电平级数动态范围,126dB,2412dB,3818dB,41624dB,166553696dB,201048576120dB,2416777216144dB,16,声音质量和数据率,17,如何记录多媒体数据（图像）,图像是自然界中的客观景物通过某种系统的映射，使人们产生视觉感受。,传统相机成像过程：1.经过镜头光聚焦在胶片上2.胶片上的感光剂随光发生变化3.经显影液显像4.成像数码相机成像过程：1.经过镜头光聚焦在CCD上2.CCD将光转换成电信号3.经处理器加工，记录在内存上4.通过显示器表示，或打印机打印,18,数字化图像,采样和量化,多媒体计算机处理图像和视频，首先必须把连续的图像函数f(x,y)进行空间和幅值的离散化处理。,F(x,y),采样：空间连续坐标(x,y)的离散化处理。量化：f(x,y)颜色的离散化。数字化：两种离散化结合在一起。图像离散化的结果称为数字图像。,x,y,现实中的图像是一种模拟信号。图像数字化目的：变成计算机能够显示和存储的格式。,F(m,n)NM,采样N个点,M,19,采样和量化,Pixel（像素）,Picture,Element,采样的实质就是要用多少点来描述一张图像。比如，一幅420570的图像，就表示这幅图像是由293400个点所组成。量化是指要使用多大范围的数值，来表示图像采样之后的每一个点的色彩信息。例如，用3个bits存储一个点，表示该图像只能有8种颜色来表现。,20,21,多媒体数据的信息量举例1,一页印在B5（约180mm255mm）纸上的文件，若以中等分辨率（300dpi）的扫描仪进行采样，其数据量约6.1Mb。一片650MB的CD-ROM，可存约850页。,1inch=25.4mm图像像素点个数=(300180)25.4(300255)25.4每个像素点量化位为1bit/24bit黑白图像文件大小=6403063110241024=6.1Mb真彩色图像文件大小=64030632410241024=147Mb,22,多媒体数据的信息量举例2,双通道立体声激光唱盘（CD-A），采样频率为44.1KHz，采样精度（量化）16位样本。其一秒钟时间内的采样位数为1.35Mb/s，一个650MB的CD-ROM，可存约1小时的音乐。,文件每秒存储量（字节/秒）采样频率(Hz)采样精度(位)声道数/844.11031628=176400B/s=1.35Mb/s一张650MB的CD-ROM，可存音乐：65081.356060=1.07H,23,多媒体数据压缩的必要性,数字化后的信息，尤其是数字化后的视频和音频信号具有数据的海量性。它给信息的存储和传输造成较大的困难，成为阻碍人类有效地获取和使用信息的瓶颈问题之一。因此研究和开发新型有效的多媒体数据压缩编码方法，以压缩的形式存储和传输这些数据将是最好的选择。,24,多媒体数据压缩的可能性,信息量与数据量的关系：,I=D-duI信息量D数据量du冗余量,举例：语音数据中文广播员一分钟读180个汉字,一个汉字存储两个字节，共需360个字节。采样频率为8kHz（人类语言带宽为4kHz），8位/样本。采样1分钟，其数据量为：8K/s8b60s8=480KB一分钟的数据冗余为480KB/360B1000（倍）的冗余,数据冗余是指信息所具有的各种性质中多余的无用空间，其多余的程度叫做“冗余度”。,25,图像数据的冗余性,空间冗余：规则物体的表面具有物理相关性，将其表面数字化后表现为数据冗余。,例如，图像中的规则物体，其亮度、饱和度及颜色相同的区域,26,图像数据的冗余性,时间冗余：视频信号和动画一般为位于一时间轴区间的一组连续画面，其中的相邻帧往往包含相同的背景和移动物体，只不过移动物体所在的空间位置略有不同，所以后一帧的数据与前一帧的数据有许多共同的地方，这种共同性是由于相邻帧记录了相邻时刻的同一场景画面。,27,图像数据的冗余性,规则有序排列的图形,结构冗余：有些图像的纹理区，图像的像素值存在着明显的分布模式。例如，方格状的地板图案等。我们称此为结构冗余。已知分布模式，可以通过某一过程生成图像。,28,知识冗余：有些图像的理解与某些基础知识有相当大的相关性。例如：人脸的图像有固定的结构。比如说嘴的上方有鼻子，鼻子的上方有眼睛，鼻子位于正脸图像的中线上，等等。这类规律性的结构可由先验知识和背景知识得到，我们称此类冗余为知识冗余。根据已有的知识，对某些图像中所包含的物体，我们可以构造其基本模型，并创建对应各种特征的图像库，进而图像的存储只需要保存一些特征参数，从而可以大大减少数据量。知识冗余是模型编码主要利用的特性。,数据的冗余性,29,数据的冗余性,视觉冗余：人类视觉系统对于图像场的任何变化，并不是都能感知的。人类视觉系统对亮度变化敏感，而对色度的变化相对不敏感；在高亮度区，人眼对亮度变化敏感度下降对物体边缘敏感，内部区域相对不敏感；对整体结构敏感，而对内部细节相对不敏感。听觉冗余：人耳对不同频率的声音的敏感性是不同的，并不能觉察所有的变化，对某些频率并不比特别关注。,30,数据压缩的条件,数据冗余：冗余即是相同或者相似信息的重复。可以在空间范围重复，也可以在时间范围重复；可以是严格重复，也可以是以某种相似性重复。人类不敏感（心理视觉听觉冗余）。,31,数据压缩与概率,数据压缩是用编码实现的,Morse电码,32,数据压缩算法的理论基础,信息之父C.E.Shannon首次用数学语言阐明了概率与信息冗余度的关系。指出任何信息都存在冗余，冗余大小与信息中每个符号（数字、字母或单词）的出现概率或者说不确定性有关。Shannon借鉴了热力学的概念，把信息中排除了冗余后的平均信息量称为“信息熵”，并给出了计算信息熵的数学表达式，信息熵也奠定了所有数据压缩算法的理论基础。,C.E.Shannon,33,常用压缩编码方法分类,冗余压缩法由于不会产生失真，一般用于文本、数据以及应用软件的压缩，它能保证完全地恢复原始数据。但这种方法压缩比较低，一般在2:15:1之间。,熵压缩法由于允许一定程度的失真，可用于对图像、声音、动态视频等数据的压缩。压缩比将达到几十倍甚至上百倍。,34,行程编码（RLE，Run-LengthEncoding）原则：重复的数据值序列用一个重复次数和单个数据值来代替。常用编码格式例如，字符串RTAAAASDEEEEE经RLE压缩后为：RT*4ASD*5E,行程编码算法,控制符,重复次数,被重复对象,35,预测编码原理,预测编码是根据离散信号之间存在着一定关联性的特点，利用前面一个或多个信号预测下一个信号进行，然后对实际值和预测值的差（预测误差）进行编码。,Frame1,Frame2,ResidualFrame,Demo,36,压缩评价指标,衡量一种数据压缩技术的三个重要指标：压缩比要大恢复效果要好，要尽可能地恢复原始数据实现压缩的算法要简单，压缩、解压速度快，尽可能地做到实时压缩、解压从技术应用目的评价压缩指标面向存储的技术面向传输的技术,37,多媒体数据压缩编码的国际标准,标准化是产业活动成功的前提标准制定的目的：使信息管理系统具有普遍性和互操作性，并确保了未来的兼容性，有助于大批量生产。标准制定方法：综合现有的编码技术，制定标准。标准制定组织：国际标准化协会（ISO），国际电子学委员会（IEC），国际电信协会（ITU）等,38,多媒体数据压缩编码的国际标准,压缩对象：音频、静态图像、动态图像JPEG，连续色调静止图像压缩标准JPEG的全称是“联合图像专家组”(JointPhotographicExpertGroup)MPEG系列标准MPEG是“活动图像专家组”(MovingPictureExpertsGroup)英文的缩写，于1988年成立，是为数字视/音频制定压缩标准的专家组，目前已拥有300多名成员，包括IBM、SUN、BBC、NEC、INTEL、AT&T等世界知名公司。MPEG-1、MPEG-2、MPEG-4MPEG-7多媒体内容描述接口MPEG-21多媒体框架,39,静态图像压缩编码标准JPEG,JPEG编码的基本处理过程,JPEG确定的目标：达到（近乎）完美的图像质量可以压缩任何连续色调的静止图片，包括灰度和色彩，任意的色彩空间和大多数尺寸可适用于大部分通用的计算机平台，硬件实现条件适中,40,JPEG压缩编码算法的主要步骤,变换编码是指先对信号进行某种函数变换，从一种信号（空间）变换到另一种（空间），然后再对信号进行编码。,DCT变换,41,MPEG系列标准（1）,MPEG-1、MPEG-2、MPEG-3和MPEG-4四个版本的研制，是用于不同带宽和数字影像质量的要求。MPEG-1：着眼于解决多媒体的存储问题用于数据速率高达大约1.5Mbit/s的数字存储媒体的活动图像和伴音编码视频数据压缩率为1/100-1/200，音频压缩率为1/6.5MPEG-1提供每秒30帧352*240分辨率的图像成功应用：VCD、MP3,42,MPEG系列标准（2）,MPEG-1音频压缩利用编码技术，将源文件重新进行编码压缩，其次是利用数据压缩，将人类听觉中的不敏感部分删除，从而达到缩小文件尺寸的目的。音频层根据压缩质量和编码复杂度分为Layer1、Layer2、Layer3三层,数字盒式磁带,数字广播声音、CDVCD、数字音乐,ISDN声音传输,43,MPEG系列标准（3）,MPEG-2：主要针对高清晰度电视的需要传输速率为10Mbps，与MPEG-1兼容，适用于1.5-60Mbps甚至更高的编码范围。具有每秒30帧704*480的分辨率最为引人注目的产品是数字电视机顶盒与DVD。MPEG-2音频编码将MPEG-1中的3层合并，并增加了环绕声。,44,MPEG系列标准（4）,MPEG-4：是一个数据速率很低的多媒体通信标准。其目标是要在异构网络环境下能够高度可靠地工作，并且具有很强的交互功能。采用基于模型/对象的第二代压缩编码技术支持基于视觉内容的交互功能典型应用：DIVXMPEG4影碟和网上MPEG4电影,45,计算机图形图像处理技术,数字化图像数据在计算机中一般有两种存储方式：位图模式和矢量图模式。这两种方式的最大区别在于记录的形式。位图模式是采用点阵方式来记录，从图像左上角第一个点开始，到右下角最后一个点结束，记录所有像素的颜色值。该存储模式比较适合于内容复杂的图像和真实的照片，但图像在放大和缩小的过程中会失真，占用磁盘空间也较大。,46,计算机图形图像处理技术,矢量图形由称为矢量的数学对象定义的线条和曲线组成。矢量根据图形的几何特性描绘图形。通过对运算表达式进行矢量运算和对坐标数据进行描述而形成的运算结果。,47,图形与图像,图像是自然界中的客观景物通过某种系统的映射，使人们产生视觉感受。在计算机中，图像用像素点进行描述。有序排列的像素点表达了自然景物的形象和色彩，而像素点又是由二进制进行描述的。因此，图像又称作“位图”。位图图像与分辨率有关。,48,图形与图像,图形是计算机在平面坐标系和空间坐标系中，通过对运算表达式进行矢量运算和对坐标数据进行描述而形成的运算结果。由于图形具有方向和长度，又被称作“矢量图”。矢量图形与分辨率无关。矢量图形是表现标志图形的最佳选择。,49,常见图像文件名后缀,BMP（Bitmap）图像类型位图（光栅）图像使用背景在MicrosoftWindows下的显示和存储版权所有Microsoft公司支持软件WindowsPaint以及任何运行在Windows下的软件优点在MicrosoftWindows下得到广泛支持。包含的图像信息丰富缺点占用磁盘空间过大，在单机上比较流行，这是Windows平台上的标准图像格式,50,常见图像文件名后缀,TIFF（TaggedImageFileFormat）标签图像文件格式图像类型位图（光栅）图像使用背景用于桌面排版以及与之相关的应用程序的数据交换版权所有由Aldus和Microsoft联合开发和积极支持支持软件桌面出版、图形艺术优点跨平台，对媒体之间的数据交换，TIFF位图模式是最佳选择之一缺点TIFF的全面性也产生了一些问题注意：应使用TIFF格式存储扫描的原图像,51,常见图像文件名后缀,JPEG（JointPhotographicExertsGroup）图像类型压缩位图（光栅）图像使用背景摄影图像的存储和显示版权所有JointPhotographicExpertsGroup（联合摄影专家组）支持软件桌面出版、图形艺术、视频捕获优点支持24位颜色，并保留照片和其它连续色调图像中存在的亮度和色相的显著和细微变化，多平台广泛支持缺点每次以JPEG格式存储图像时都会产生损失，损失累积会造成图像质量严重下降,52,常见图像文件名后缀,GIF（GraphicsInterchangeFormat）文件GIF是采用无损压缩方法中效率较高的LZW算法推出的一种高压缩比的彩色图像格式，主要用于图像文件的网络传输。GIF是一种8位彩色文件格式。最初，GIF格式只是为了存储单幅静止图像，称为GIF87a，后来进一步发展成为GIF89a，可以同时存储若干静止图像进而形成了动画。,渐进传输显示,顺序传输显示,53,JPEG与GIF比较,原图101KJPEG压缩20KGIF压缩41K,原图27KJPEG压缩19KGIF压缩3K,54,常见图像文件名后缀,PNG（PortableNetworkGraphics）PNG是一种可以存储32位信息的图像文件格式，采用无损压缩方式来减少文件的大小。目前越来越多的软件开始支持这一格式，而且在网络上也开始流行。PNG使用的是高速交替显示方案，显示速度快，只需下载1/64的图像信息就可以显示出低分辨率的预览图像，遗憾的是它不支持动画。,55,常见图形文件名后缀,WMF（WindowsMetafileFormat）这是Windows中常见的一种图元文件格式，是矢量文件格式。它具有文件短小、图案造型化的特点，整个图形常由各个独立的组成部分拼接而成，但其图形往往较粗糙。,56,常见图形文件名后缀,EMF（EnhancedMetafile）这是微软公司开发的一种Windows32位扩展图元文件格式，是矢量文件格式。其总体目标是要弥补使用WMF的不足，使得图元文件更加易于接受。,57,常见图形文件名后缀,DXF（AutodeskDrawingeXchangeFormat）DXF是AutoCAD中的矢量文件格式，它以ASCII码方式存储文件，在表现图形的大小方面十分精确。SWF（ShockwaveFormat）SWF是二维动画软件Flash中的矢量动画格式，主要用于Web页面上的动画发布。,58,常见图像文件名后缀,通用文件格式和专用文件格式PSD格式是AdobePhotoshop图像处理软件中默认的文件格式，它是一种支持所有的图像模式（位图、灰度、双色调、索引彩色、RGB、CMYK、Lab和多通道）、参考线、Alpha通道、专色通道和图层（包括调整图层、文字图层和图层效果）的图像文件格式。在处理图像的过程中使用PSD格式保存,59,计算机数字音频处理技术,计算机声音有两种产生途径一种是通过数字化录制直接获取（波形音频）另一种是利用声音合成技术实现，可用于语音合成和音乐合成声音合成技术语音合成：文句转语音（Text-To-Speech），是指将输入的文字或储存于计算机中的文件转换成以清晰、流畅、自然的语音输出的技术。音乐合成：MIDI（乐器数字接口）是在1983年有MIDI制造者协会（MMA）提出作为一个控制电子乐器的标准化串行通信协议提出的。,60,让计算机说话,文字-语音转换（TextToSpeech）把计算机内的文本转换成连续自然的语音流，是语音合成的技术延伸,语言学处理,语音学处理,波形编辑合成,研究目标确保可懂度（1982年）提高清晰度（1984年）改善自然度（1995年）具有情感、表现力,61,Demo,语音合成,62,MIDI音乐,MIDI（MusicInstrumentDigitalInterface）乐器数字接口是一个供不同设备进行信号传输的接口的标准。MIDI三要素：音源、音序器、输入设备。,63,作曲家的最爱,MIDI文件特点用乐谱指令代替声音数据占用存储空间极小，约5-10KB/分钟适合乐曲创作和远距离传输播放效果取决于音源MIDI文件可以用作曲软件写出，也可以通过声卡的MIDI口把外接音序器演奏的乐曲输入电脑里,不同的格式有自己的用途，比如大家都应该很熟悉的MP3格式就是用于聆听用途的。,64,网络流媒体,网络流媒体原理简单说就是将原来连续不断的音频分割成一个一个带有顺序标记的小数据包，将这些小数据包通过网络进行传递，在接收的时候再将这些数据包重新按顺序组织起来播放。如果网络质量太差，有些数据包收不到或者延缓了到达，它就跳过这些数据包不播放，以保证用户在线聆听的内容是基本连续的。流媒体（StreamingMedia）指在数据网络上按时间先后次序传输和播放的连续音/视频数据流。与传统的播放方式不同，流媒体在播放前并不下载整个文件，只将部分内容缓存，使流媒体数据流边下载边播放。,65,音频文件格式,媒体格式扩展名相关公司或组织主要优点主要缺点适用领域,mp3Fraunhofer-IIS,在低至128kbps的比特率下提供接近CD音质的音频质量。广泛的支持,音质欠佳,一般聆听和高保真聆听,RealMediara,RealNetworksrma,在极低的比特率环境下提供可听音频质量网络流媒体的代名词,不适于除网络传播之外的用途。音质不是很好,网络音频流传输,66,音频文件格式,媒体格式扩展名相关公司或组织主要优点主要缺点适用领域,OggVorbisOGGXiphFoundation,在极低的比特率环境下提供接近CD音质的音频。开放源代码，跨平台,发展较慢，推广力度不足,一般聆听和高保真聆听,67,音频文件格式,媒体格式扩展名相关公司或组织主要优点主要缺点适用领域,aiff,可通过增加驱动程序而支持各种各样的编码技术,一般限于苹果电脑平台使用,音频原始素材保存,aiff,Apple,68,计算机视频处理技术应用,DV（DigitalVideoFormat）视频编缉这是由索尼、松下、JVC等多家厂商联合提出的一种家用数字视频格式。目前非常流行的数码摄像机就是使用这种格式记录视频数据的。电视台节目的非线性编辑系统，采用M-JPEG压缩（即针对活动图像而优化的JPEG压缩而称）。家庭影院或网络传播，采用MPEG压缩。,69,本地视频文件格式,AVI（Audio-Videolnterleaved）是目前较为流行的视频文件格式，采用有损压缩技术。主要应用在多媒体光盘上，用来保存电影、电视等各种影像信息，有时也出现在Internet上，供用户下载、欣赏新影片的精彩片段。常用的AVI视频编码器有InterlIndeo5.03、MicrosoftRLE、MicrosoftVideo、CinepakCodecbyRadius、DivX等。常用的AVI音频编码器有：InterlAudioSoftware、TrueSpeech、MicrosoftGSM、MS-ADPCM、DivX等。DVAVI的格式是一种伴随着DV摄像机而出现的新数字视频文件格式。由于几乎没有什么压缩影像质量极高，常用于视频编辑和特效制作过程中保存视频数据。,70,本地视频文件格式,MPEG格式（.MPEG/.MPG/.DAT）MPG文件以MPEG压缩和解压缩技术为基础对全运动视频图像进行压缩，并配以具有接近CD音质的伴音信息。根据内部使用的视频压缩编码不同，MPEG格式还可以细分为MPEG-1、MPEG-2和MPEG-4格式。QuickTime格式（.MOV/.QT）Apple公司开发的一种视频格式，默认的播放器是苹果的QuickTimePlayer。具有较高的压缩比率和较完美的视频清晰度等特点，其最大的特点是跨平台性。,71,网络流媒体视频文件格式,WMV格式（WindowsMediaVideo）由微软推出的一种流媒体格式，用途：网上播放和传输。RM格式RealNetworks推出。FLV格式（FLASHVIDEO）FLV已经成为当前视频文件的主流格式，目前各在线视频网站均采用此视频格式。FLV是随着FlashMX的推出发展而来的视频格式，它利用了网页上广泛使用的FlashPlayer平台，将视频整合到Flash动画中，FLV文件体积小巧，清晰的FLV视频1分钟在1MB左右。,72,文件格式与编码,文件格式就是文件所采用的数据编码和存储方式。在windows下一般可以从文件的后缀名来区分。编码解码器的主要作用是对视频信号进行压缩和解压缩。为了在家用设备或者电脑上重放这些视频和音频则需要用到解码软件，一般称为插件。在生成预演文件及最终节目时，都需要选择一种合适的视频、音频编码器。例如：AVI格式与各色编码器,73,多媒体技术的应用领域,演示文稿、商业广告、产品演示、教育培训、多媒体游戏系统、影视创作等等。,74,多媒体技术的应用领域,数字表示（软）,75,多媒体技术的应用领域,辅助产品设计,辅助设计,76,多媒体技术的应用领域,辅助产品设计,辅助设计,77,多媒体技术的应用领域,影视特技,使用缩微模型在水上拍摄，捕捉真实的水溅落效果。灾难镜头中的数字化乘客的动作捕捉。,先在绿背景下拍摄，然后将摄象机的移动与缩小比例的轮船模型进行运动合成，用数字化的方式制作其他内容。,轮船模型镜头与众多的在绿背景