多媒体通信chapter_1

1、课程安排备注：一、概述C多媒体学科 多媒体数据的特点； 多媒体系统； 多媒体学科的研究内容；C多媒体学科的形成与发展 多媒体学科的形成标志； 带动多媒体学科形成与发展的技术因素； 多媒体技术的现状；C多媒体研究的发展方向 一、概述C多媒体学科 多媒体数据的特点；多媒体数据的特点； 多媒体系统； 多媒体学科的研究内容；C多媒体学科的形成与发展 多媒体学科的形成标志； 带动多媒体学科形成与发展的技术因素； 多媒体技术的现状；C多媒体研究的发展方向 多媒体数据及其特点 Multi - Media 媒体 - 信息的载体； 不同媒体类型 - 承载信息的不同形式； 1，类型：文本、图形、图象、音频、视频等

2、；3，不同类型的媒体承载信息的能力有所不同；4，一个规律：某种类型的媒体承载信息的能力越高，那么对该类媒体进行表示、存储、传输及其它处理时，所要解决的问题就越多，解决问题的难度也就越大。5，多媒体数据承载信息的能力最强，处理的难度最大。多媒体数据及其特点Multi - Media1. 含有多个数据体；2. 必要条件 - 数据体在内容上相互关联；3. 关系：a) 基本关系：合成（或称聚集）关系；b) 本质性关系：多种约束关系基于内容的约束关系空域约束关系时域约束关系多媒体数据及其特点基于内容的约束关系：多媒体数据原始数据文字分析图表分析动画分析（某种特征的演变）媒体对象因承载相同或相关内容而表现

3、出来的逻辑上的关联性多媒体数据及其特点空域约束关系：文字图片视频表格显示空间媒体对象在显示空间上（空域）的相对位置关系多媒体数据及其特点时域约束关系：videoaudiotextanamationaudiopicturepicturepicture时间多媒体数据及其特点一、概述C多媒体学科 多媒体数据的特点； 多媒体系统；多媒体系统； 多媒体学科的研究内容；C多媒体学科的形成与发展 多媒体学科的形成标志； 带动多媒体学科形成与发展的技术因素； 多媒体技术的现状；C多媒体研究的发展方向 多媒体系统单机多媒体系统 与 网络多媒体系统集成： 数据的集成； 以多媒体数据为主要的处理对象； 同步关系（各

4、类约束关系）- 纽带； 处理的集成; 有效地协调、综合对每一类媒体数据的 处理方法 处理 影响、约束等 处理 处理：捕获、存储、显示、传输、信号处理 同步关系的维护交互： 较其它类型的系统而言，更为突出； 在该方面，与多模式系统(multi-modal system)有较强的相关性一、概述C多媒体学科 多媒体数据的特点； 多媒体系统； 多媒体学科的研究内容；多媒体学科的研究内容；C多媒体学科的形成与发展 多媒体学科的形成标志； 带动多媒体学科形成与发展的技术因素； 多媒体技术的现状；C多媒体研究的发展方向 多媒体学科的研究内容多媒体数据的表示方法；多媒体数据的物理存储技术 数据量大、实时性突出

5、；多媒体数据库（表示、存储、查询、读写等）；多媒体信号处理；多媒体传输；核心：同步约束关系的表示与控制多媒体操作系统 任务调度、系统服务等；一、概述C多媒体学科 多媒体数据的特点； 多媒体系统； 多媒体学科的研究内容；C多媒体学科的形成与发展 多媒体学科的形成标志；多媒体学科的形成标志； 带动多媒体学科形成与发展的技术因素； 多媒体技术的现状；C多媒体研究的发展方向 多媒体学科的形成标志相关学科 - 新问题（关联、共同特点）- 讨论（学术刊物、学术会议）- 新的理论体系 新学科v 1985年10月，IEEE的 Computer Magazine 首次就多媒体通信中的 关键性问题进行了介绍和讨论

6、；v 1990年2月，Byte首次就多媒体应用的发展状况进行了专题报道；v 英国于1990年创办了其第一本专门探讨多媒体技术的刊物： Multimedia Computing with Sound and Motionv 1990年4月，在IEEE主办的刊物 Journal on Selected Areas in Communications 上，发表了多篇与多媒体技术相关的高质量的论文；v 90年代初期，IEEE、ACM等在国际上有着广泛影响的技术机构先后以 多媒体技术为主题召开了规模不等的国际学术会议，出版了多本论文 集。一、概述C多媒体学科 多媒体数据的特点； 多媒体系统； 多媒体学科

7、的研究内容；C多媒体学科的形成与发展 多媒体学科的形成标志； 带动多媒体学科形成与发展的技术因素；带动多媒体学科形成与发展的技术因素； 多媒体技术的现状；C多媒体研究的发展方向 多媒体学科与相关学科的关系相互带动，相互促进；相关学科的研究成果为多媒体研究的形成与发展奠定了坚实的基础；多媒体研究的形成与深入为相关学科带来了新的研究课题；示例：GUI - 多媒体应用 - 多模式应用；传输介质 - 音、视频传输 - 传输介质、QoS保障等；实际上，对这些新问题 的研究已经成为多媒体研究的重要的组成部分。一、概述C多媒体学科 多媒体数据的特点； 多媒体系统； 多媒体学科的研究内容；C多媒体学科的形成与

8、发展 多媒体学科的形成标志； 带动多媒体学科形成与发展的技术因素； 多媒体技术的现状；多媒体技术的现状；C多媒体研究的发展方向 多媒体技术的现状多媒体技术的现状一、概述C多媒体学科 多媒体数据的特点； 多媒体系统； 多媒体学科的研究内容；C多媒体学科的形成与发展 多媒体学科的形成标志； 带动多媒体学科形成与发展的技术因素； 多媒体技术的现状；C多媒体研究的发展方向 多媒体技术的发展趋势进行数据压缩的必要性：压缩标准：压缩标准（续）：CPUMemoryBusVideo CardMedia server - the storage systemOperating System:Priority-b

9、ased schedulingTask(1st)Task(2nd)Task(nth) .Task(2nd)Task(2nd) the one to be chosen as the next one who occupies the time slice; Dead-line and dead-line based scheduling:The playback dead-lineBetween the dead-lines:v Data acquiring;v Decoding;v Decompression;v Preparations before playback;No enough time slice(s) miss the dead-line out of sync. degrade of application