多媒体通信概念

1、1 王王 汝汝 言言 2 教学目的： 旨在让同学们了解多媒体通信技术 与相关业务所采用的技术原理以及 其发展趋势，从而使同学们扩大知 识面，增强对新技术的适应能力 3 教学要求： 在全面理解多媒体信息处理的相关技 术、多媒体业务的相关技术标准的基 础上，熟悉多媒体通信与信息化社会 的关系，并能从事多媒体系统的设计 与集成 4 本课程的主要内容： q多媒体及多媒体通信的基本概念 q多媒体通信的信息处理技术 q多媒体通信技术 q多媒体通信技术的应用 5 教材 ： 多媒体通信技术 西安电子科技大学出版社 6 主要参考书 ： 多媒体及其相关技术的原理与应用 东南大学出版社 吴东南 数字技术：数字视频和

2、音频压缩 电子工业出版社 译本 语音信号数字处理 电子工业出版社 杨行峻 数字视频处理 电子工业出版社 译本 多媒体通信协议与应用 清华大学出版社 译本 多媒体通信网 人民邮电出版社 蒋林涛 多媒体通信技术基础 电子工业出版社 蔡安妮等 7 联系方式： 地址：信科大厦908 电话邮件： 8 多媒体通信相关概念 9 媒体 q信息传递和存取的最基本的技术和手段 q不是指媒体本身，而是指处理和应用它 的一套技术 10 媒体的种类 q 感觉媒体：声音、声音、 图形、图形、 动画、动画、 运动图像和文本等运动图像和文本等 q 表示媒体：图像编码、图像编码、 文本编码和声音编码

3、等文本编码和声音编码等 q 显示媒体：显示屏、打印机、键盘、显示屏、打印机、键盘、 鼠标器、扫描仪等鼠标器、扫描仪等 q 存储媒体：硬盘、硬盘、 光盘、光盘、 U盘、磁带、盘、磁带、 ROM、 RAM等等 q 传输媒体：同轴电缆、同轴电缆、 双绞线、双绞线、 光缆和无线电链路等光缆和无线电链路等 多媒体技术所涉及的媒体多属于表示媒体 11 表示媒体的时间属性 q 离散媒体：值不会随着时间而变化 文本，图像，图片，. q 连续媒体：值随着时间而变化 语音，音乐，视频，动画，. 12 表示媒体的空间属性 q 1D媒体 单声道话音，音乐 q 2D媒体 双声道音乐，文本，图像，2D图片 q 3D及多维

4、媒体 3D图片，全景图像，空间立体声音乐 13 表示媒体的生成属性 q 自然媒体(使用数字化方法从现实世界获取的媒体) 取样声音，图像，视频 q 合成媒体(使用计算机创建的媒体) 合成语音， MIDI，图片 , 动画 14 多媒体 q 多媒体强调的是使用多种媒体、综合表达信息内 容并进行交互式处理的技术 q 单独说多媒体是没有意义的， 只有将它与名词 相联系（如多媒体终端、 多媒体系统）才是正 确的说法 q 多媒体概念相对应的是单媒体 15 q 多媒体技术是多种技术的有机集成 q 多媒体技术是涉及多门学科和多种技术领域的 系统工程，它主要涉及到计算机技术、电子技 术、通信技术、广播电视技术以及

5、其他若干技 术。 多媒体 16 多媒体是信息技术发展的必然趋势 计算机计算机通通 信信 大众传媒大众传媒 数值计算数值计算 数据处理数据处理 图形、图象处理图形、图象处理 声音处理声音处理 视频处理视频处理 邮邮 政政 电电 报报 电电 话话 传传 真真 数据通信数据通信 综合业务综合业务 多媒体多媒体 书，刊，报纸书，刊，报纸 广广 播播 电电 影影 电电 视视 光盘出版物光盘出版物 交互电视交互电视 网络出版网络出版 支持宽带综合业务的数据通信网络支持宽带综合业务的数据通信网络 信息技术走向汇聚和融合信息技术走向汇聚和融合 17 超文本和超媒体 超文本：是一种信息管理技术，将信息自然地相连

6、接， 建立穿过文档的大量信息路径，注释已有文本。 超媒体：多媒体+超文本 例如：Windows的“帮助”信息就是一种超文本 18 超文本 q 超文本是一种典型的数据库技术，是由节点和超文本是一种典型的数据库技术，是由节点和 表达节点之间关系的链组成的网表达节点之间关系的链组成的网 q 超文本的访问方式决定于其内部结构超文本的访问方式决定于其内部结构 q 超文本特点：超文本特点：具有多种媒体信息、网络结构形具有多种媒体信息、网络结构形 式及交互特性式及交互特性 19 超文本结构 20 超媒体 超级链 超级链也可以将若干不同媒体链接起 来，其集合便称为超媒体 21 超文本和超媒体的组成要素 q 节

7、点：节点是表达信息的单位，是围绕一个特殊主题组 织起来的数据集合。节点的内容可以是文本、图形、图 像、动画、音频、视频等 q 链：链用于固定节点间的信息联系， 它以某种形式将一 个节点与其他节点连接起来 q 网络：由节点和链构成的网络是一个有向图 22 多媒体通信 q多媒体技术和通信技术的有机结合： 计算机的交互性 通信网的分布性 电视广播的真实性 23 多媒体通信的发展主要得力于： q市场需求的推动 q语音、图像等信息处理技术 q信息传输和交换技术 q高度集成、大容量存储、快速处理能力 的终端与网络设备 24 多媒体通信的体系结构 各种多媒体通信应用 多媒体通信平台 网络服务平台 传输网络

8、（各种有线或无线核心及接入网络） 25 多媒体通信特征 集成性 q内容数据信息： 典型的信息结构：客体结构、文件结构 信息由结构框架和结构内容组成 文本、图形、静止图像与二值图像、声音、运动图像 26 多媒体通信特征 文本：符号、符号的字型和字体、在数据传送和操作管理中的符号编码 图形：镶嵌图形法、动态再定义图形法、几何图形法及增量法 静止与二值图像：JPEG、G3、G4、JBIG 声音：不同频率抽样、不同比特量化、不同标准编码 运动图像： H.261、 H.264、 MPEG系列等等 27 多媒体通信特征 集成性 q 多媒体和超媒体信息：多媒体和超媒体信息与单媒体信息多媒体和超媒体信息与单媒

9、体信息 不一样，它们是结构化的信息，由结构框架和内容数据两不一样，它们是结构化的信息，由结构框架和内容数据两 部分组成。多媒体和超媒体信息的最小表达形式有两类：部分组成。多媒体和超媒体信息的最小表达形式有两类： 客体、文件。客体、文件。 q 脚本信息：脚本信息是一组特定的用语意关系联系起来的脚本信息是一组特定的用语意关系联系起来的 结构化的多媒体和超媒体信息结构化的多媒体和超媒体信息 q 特定的应用信息： 是高层信息，是高层信息， 它是与应用密切相关的，它是与应用密切相关的， 并随应用场合的不同而有很大的不同。（如目录信息）并随应用场合的不同而有很大的不同。（如目录信息） 28 多媒体通信特征

10、 交互性 q通信中人与系统之间的相互控制能力 q 人机接口人机接口 q 用户终端与系统之间的应用层通信协议（多信道通信协议）用户终端与系统之间的应用层通信协议（多信道通信协议） 例如：彩色电视系统不是多媒体系统，例如：彩色电视系统不是多媒体系统， VOD系统是多媒体通信系统系统是多媒体通信系统 29 多媒体通信特征 同步性 q 同步性指的是在多媒体通信终端上显现的图像、同步性指的是在多媒体通信终端上显现的图像、 声音和声音和 文字是以同步方式工作的。文字是以同步方式工作的。 q 信息的同步与否，决定了系统是多媒体系统还是多种媒信息的同步与否，决定了系统是多媒体系统还是多种媒 体系统体系统 30

11、 多媒体通信特征 同步性 q 链路层级同步：是通过信息流帧结构的特殊设计来实现的。比特交织的是通过信息流帧结构的特殊设计来实现的。比特交织的 帧结构、块交织的帧结构。帧结构、块交织的帧结构。 q 表示层级同步 ：是通过在客体（或文件）复合过程中引入同步机制和是通过在客体（或文件）复合过程中引入同步机制和 超文本组合过程中引入同步机制来实现的。简单客体、复合客体超文本组合过程中引入同步机制来实现的。简单客体、复合客体 绝对时间同步、相对时间同步、链式同步、循环同步、条件同步 q 应用层级同步 ：采用的技术为脚本同步技术。类似电影拍摄中的脚本采用的技术为脚本同步技术。类似电影拍摄中的脚本 q 三种同步方式任意组合三种同步方式任意组合 q 三种特征并存、缺一不可三种特征并存、缺一不可 31 多媒体通信应用示例 32 多媒体通信的标准化 ITU-T: 国际电信联盟电信标准部 ISO： 国际标准化组织 IEC： 国际电子技术委员会 IETF： 互联网工程工作小组 联合技术委员会- 子委员