第5章多媒体技术基础新

?大学计算机根底教程?主要内容多媒体的根本概念什么是多媒体多媒体是多种媒体的组合，即文字、声音、图像、图形、动画、视频等各种媒体的组合。包括：文本包含字母、数字、字、词、等根本元素，一般采用文字编辑软件生成；图形是采用计算机语言或专门软件生成的矢量图形；图像是采用扫描设备、摄像设备或其他图像处理设备生成的用像素点记录的自然影像；什么是多媒体视频是动态的影视图像，即视频是动态的图像；音频是指大约在20Hz~20kHz频率范围的连续变化的声音信号；动画是采用计算机动画软件创作并可连续的画面。文本媒体文本可以是英文字母、阿拉伯数字、汉字、中文标点符号和英文标点符号等，一般由文字编辑软件〔如记事本、WPS字处理软件和MicrosoftWord应用程序等〕生成。需要区别的是：中文标点符号如句号“。〞和英文标点符号如句号“.〞是不同的文本。图形和图像媒体图形图像音频和视频媒体音频视频动画媒体动画多媒体信息的特点数据量大图形图像、音频和视频等媒体元素需要很大的存储空间。例如，5分钟标准质量的PAL视频信息需要大约6.6GB的存储空间。面对如此巨大的存储要求，必须对多媒体信息进行压缩处理。多数据流某些多媒体展示时表现为静态和连续信息的集成，例如，视频播放时就是静态的图像和连续的音频信息的集成。输入时，每一种信息都有一个独立的数据流；播放时，需要对这些数据流加以合成。各种类型的媒体信息可以存储在一起，也可单独进行存储。多媒体信息的特点连续性多媒体信息一般包含时间数据，具有连续性的特点。例如，音频、视频和动画都是时间相关的。编码方式多样多媒体信息由于处理的信息类型复杂，导致编码方式多样。例如，文本中的英文字符使用ASCII编码，中文字符使用汉字信息交换码、音频和图像都是基于采样-量化-编码的过程进行编码。什么是音频信号音频，又称为声音，是通过空气传播的一种连续的波，称为声波。声音的强弱表达在声波压力的大小，音调的上下表达在声音的频率上。声音信号的两个根本参数是频率和幅度。频率小于20Hz的信号称为亚音信号；频率在20Hz～20kHz的信号称为音频信号；人们说话的信号频率通常在300Hz～3kHz；频率大于20kHz的信号称为超音频信号，或者称为超声波信号。模拟信号与数字信号模拟信号:时间和幅度都是连续的信号数字信号:

幅值被限制在有限个数值之内，它不是连续的而是离散的，即幅值只能取有限的数值音频采样音频采样：每隔一个时间间隔在声音波形上取一个幅度值，将时间上连续的信号变成离散的信号；采样的目的是在时间上，对连续的变化进行离散化，最终以有限个数的“点〞，去替代原来连续的信号。音频采样的例子t音频采样的例子t音频量化音频量化：指的是在幅度值的取值空间上进行离散化，用有限位的二进制代码，表示落在同一时间段内的幅度值音频量化的例子3位量化2位量化音频编码根据采样和量化的结果，将各离散点的幅度值进行“逐点〞记录，将记录的结果保存为一个文件，即为该音频信息的数据文件，实现对音频信息的编码；将来按照采样、量化和编码的“逆思想〞，可把该文件复原。只有当采样频率高于声音信号最高频率的两倍时，才能将数字信号表示的声音复原为原来的声音。音频编码的图示001010100101011111000100100100010001010101110音频文件存储容量的计算采样频率：(Hz单位时间内的采样次数一般为11.025kHz或22.05kHz)量化位数：(bit表示量化级别的二进制的位数一般为8位或16位)声道数量：单声道or多声道采样频率11KHz8位量化采样频率22KHz16位量化音频文件存储容量的计算音频数据的存储容量采样频率*量化位数*声道数*播放时间/8〔字节B〕采样频率=44.1kHz样本精度=16bit立体声播放时间=60秒存储空间=44.1*1000*16*2*60/(8*1024*1024)=10.09MB颜色模型颜色模型〔colormodel〕指的是描述所有颜色的一套规那么和定义。最典型的代表是RGB〔RedGreenBlue〕颜色模型。两种典型的颜色模型：RGB颜色模型：红绿篮颜色模型HSL颜色模型：色调饱和度亮度颜色模型RGB颜色模型颜色=R〔红色的百分比〕+G〔绿色的百分比〕＋B〔蓝色的百分比〕。当三种根本颜色等量相加时，得到白色。RGB颜色模型颜色=R〔红色的百分比〕+G〔绿色的百分比〕＋B〔蓝色的百分比〕。当红绿等量相加而篮为0时得到黄色。RGB颜色模型颜色=R〔红色的百分比〕+G〔绿色的百分比〕＋B〔蓝色的百分比〕。当红篮等量相加而绿为0时得到品红色。RGB颜色模型颜色=R〔红色的百分比〕+G〔绿色的百分比〕＋B〔蓝色的百分比〕。当绿篮等量相加而红为0时得到青色。图像的数字化编码也经过采样、量化和编码三个过程采样是将图像在二维空间上进行离散化分别在图像的横向和纵向设置M和N个相等的间隔；然后得到M*N个点，组成一个的包含假设干行和假设干列的一个“阵列〞，每个点称为一个像素；量化与编码量化是对像素的颜色进行离散化(即用确定的数值记录点的颜色)量化的等级与每个像素颜色的二进制数值的位数有关表示像素状态的位数越多，具有的色彩就越丰富黑白方式：用一个“位〞表示像元的颜色；有2种色真彩色方式：用三个字节表示一个像元的颜色；具有2563个不同的颜色编码是对每个像素的颜色，以不同的二进制代码形式进行记录图像编码的例子采样：在横方向和纵方向上都设置10个采样点，得到10*10个像素量化：由于是黑白图像，所以量化字长设置为1位二进制代码，并假定“0〞表示黑色，“1〞表示白色编码：最后将编码数值一行一行地记录保存起来，就完成了对图像的二进制编码图像编码的例11101111011110111101111011110111101111011000000000000000000001101111011110111101111011110111101111011影响图像质量的因素图像分辨率〔相当于音频的采样频率〕用多少个像素表示图像像素深度或位深度〔相当于音频的量化精度〕用多少个二进制位表示一个像素的状态分辨率越高，像素深度越大，将占用越多的存储空间；当然，图像就越清晰圆滑美观逼真宽度：271高度：300颜色：2色大小：9.9KB宽度：271高度：300颜色：4色大小：19.8KB不同像素深度的例宽度：271高度：300颜色：256色大小：79.4KB宽度：271高度：300颜色：真彩色大小：238.2KB不同像素深度的例不同分辨率的例子图像文件存储容量的计算存储一幅352×288的静态真彩色图像图像分辨率为352×288像素深度为3B存储容量=(352×288×3)/1024=297KB如提高图像分辨率存储容量=(768×1024×3)/(1024×1024)=2.25MB将视频信息在时间上、帧内空间上和色彩上分别进行离散化，并最终以二进制代码形式编码记录将涉及比音频信息和图像信息数字化更复杂的原理和方法，其根本的思想包括：将完整的视频信息在时间上分解为假设干的帧；参照图像信息编码的方法进行“帧内编码〞；参照音频信息编码的方法进行伴音编码处理；考虑播放速率和伴音同步，最后完成视频信息编码视频文件的存储容量计算表示一幅352*288的静态真彩色图象需要的存储空间352*288*3(B)=304128B=297KB假设每秒播放25帧，计算1分钟视频数据的存储空间〔不含音频数据〕352*288*3*25*60(B)=435.06MB数据压缩的必要性数据压缩的根本概念文本文件的压缩音频文件的压缩图像文件的压缩数据压缩的必要性数据压缩的必要性大文件需要大的内存空间，否那么将降低运行速度大文件需要大的外部存储空间，因而降低计算机硬盘等存储设备的有效使用效率大文件需要较长的传输时间，因而容易发生在传输过程中的中断数据压缩根本概念压缩：指重新记录一个文件，以使它占用较小存储空间解压缩：数据压缩必须是可逆的；数据压缩的逆过程叫解压缩压缩比：当数据被压缩的时候，包含数据的文件将缩小；其缩小量可用压缩比衡量压缩比＝原文件容量﹕压缩后新文件的容量缩比为20:1意味着原始文件是压缩后文件的20倍数据压缩根本概念有损压缩为获得更高地压缩比，首先对数据信息进行重新的组织整理，剔除某些不重要、不敏感、可忽略的原始数据，然后再进行压缩无损压缩数据无需事先进行重新组织而直接进行压缩，压缩文件中完全保存了原文件中的全部信息数据文本文件的数据压缩实现文本文件压缩的方法很多介绍：自适应模型替代法自适应模型替代法它首先扫描整个文本，寻找重复出现两次或两次以上的字节模型当找到一个模型后，就用在文本中没有用到过的一个新的字节模型替代它只要新的字节模型“短〞于原字节模型，就可起到“压缩〞的目的自适应模型替代法举例自适应模型替代法将44个字节〔包括空格和标点〕长的句子压缩到29个字节。原始文件包含44个字节theraininSpainfallsmainlyontheplain.用“％”替代“the”用“＠”替代“ain”%r@inSp@fallsm@lyon%pl@.%raininSpainfallsmainlyon%plain.％

the@ain“压缩”后建立一个字典式记录。

上例中用来做替代的符号不是实际上使用的字符，是为了举例而用的。图像信息的数据压缩例如：在右侧图像中，兰色区域中所有点〔像素〕的颜色是相同的，如果仍“逐点记录〞，必然产生很大的数据冗余。图像信息是“逐点记录的〞。之所以能进行压缩是因为信息本身通常存在很大的数据冗余量。图像数据压缩方法

“游程长度编码〞法〔Runlengthencoding〕游程长度：具有相同颜色并且是连续的像素的数目。通过为连续的相同颜色的像素重新编码实现图像文件的压缩——游程长度编码。有一个32×32象素，256色的位图〔如右图所示〕，其中每个像素需要一个字节存储颜色；如白色用11111111表示，黑色用00000000表示没压缩时：图像的前九行有32×9=288个像素，需288个字节存储游程长度编码例图中有167个连续的白色像素。把这167个字节压缩成２个字节。一个字节记录连续的像素点数，一个字节表示共同的颜色。10100111〔167〕11111111〔白色〕使用相同的方法可以继续压缩后续的像素。游程长度编码方法①前167个白色像素被压缩成2B：10100111

11111111②下面5个黑色像素编码为：0000010100000000代表5个黑色代表167代表白色32×32像素压缩图示：58/88重复次数(十进制)重复次数(二进制)像素颜色像素颜色(二进制)16710100111白色11111111500000101黑色000000002600011010白色11111111100000001黑色00000000500000101黄色10100000100000001黑色0000000