多媒体通信技术研究论文-2018

《多媒体通信技术研究论文-2018》由会员上传分享，免费在线阅读，更多相关内容在学术论文-天天文库。

1、研究生《多媒体通信技术》课程报告题目：多媒体同步技术学号姓名院（系、所）一、背景随着网络通信技术、巨容量存储技术、计算机处理能力、用户界面以及信息压缩技术的发展和改进,使得在用户操作环境内使用不同的媒体成为现实.这些媒体可以组合在一起提供非常广泛的应用,如教学、广告、娱乐以及可视电话和会议电视等在多媒体系统中一个非常重要的环节是多媒体数据的表现,这是指将各种类型的媒体按照某种关系同时和或顺序地表现出来.多媒体数据主要有3种类型:静态、动态和混型。静态型是指以不同空间方位排列的文本和图象组成的电子文件,是与时间无关的媒体对象.动态型数据是指语音讲解、视频图象或动画等依赖于时间的媒体。混合型是由静

2、态和动态类型数据构成的复合表现形式。在多媒体应用中,为了加深对某一目标对象的理解,往往需要对某些媒体执行诸如加速、减慢、重复或重新生成组合等交互性操作,从而要求多媒体系统中不同媒体之间具有独立性、共存性、集成性和交互性.另外,各种媒体经由不同传输路径时,也会引起不同程度的延迟和误差,从而破坏了媒体间的协调性。多媒体对象的表现不仅包括静态的(即在某一时间段上表现保持不变),如以不同空间方位排列的文本、图像或图形,而且包括动态的即时变的表现类型,如音频和视频,动态和静态的复合,如带语音注解的文献.这种复合表现形式在多媒体应用环境中更普遍,表现是多媒体信息系统的一个重要特征,是需要一定时空的一次活动

3、.多媒体对象在整个表现过程中与时间有关,同时在每个表现点上又与空间相关。多媒体对象表现的基本思想是以时间为主线来安排活动的开始、中断、继续、终止等操作,仅在合成对象上附加各自的空间特性(置、大小等)。可见,多媒体对象表现的关键是确定多媒体对象在时间上的顺序,即多媒体的时间同步。多媒体技术需要同时处理声音、文字、图像等多种媒体信息，在多媒体系统所处理的信息中，各个媒体都与时间有着或多或少的依从关系。系统中各媒体在不同的通信路径上传输，将分别产生不同的延迟和损耗，造成媒体之间协同性的破坏，因此，媒体同步也是一个关键问题。多媒体系统中有一个核心系统（即多媒体操作系统）就是为了解决声音、图像、文字等多

4、媒体信息的综合处理，解决多媒体信息的时空同步问题。二、多媒体同步概念与要求我们一般的，称维持一个或者多个的多媒体时间顺序的过程为多媒体同步过程。多媒体通信的同步是在整个多媒体通信过程中的，而不仅仅是在多媒体显示过程中才有的。多种媒体的相互关系可以总结为一下三种：内容关系、空间关系、时间关系。多媒体同步主要是以上三种关系的确定。不难看出,在这3种同步关系中,时间关系是最重要的一种,在实际应用中时间关系也是考虑得最多的一种关系。实际上,多媒体同步指的就是各类媒体在事件发生时间顺序的确立。多媒体的同步类型可以分为三种：上层同步，中层同步和底层同步。同步的要求主要是：多媒体通信同步、多媒体表现同步、多

5、媒体交互同步、时延抖动和时延。根据多媒体同步体系结构中的不同层次的同步要求,在实现系统中表现为不同的多媒体同步。上层同步也称为表现级同步或交互同步、应用层同步，即用户级同步。在这一级，用户可以对各个媒体进行编排，由此决定何种媒体何时以何种时空关系表现出来；中层同步是信息合成同步，即不同媒体类型的数据之间的合成，所以，合成同步又称为“媒体之间的同步”。这层同步涉及到不同类型的媒体数据，侧重于它们在合成表现时的时间关系的描述。媒体之间的同步，除了数据的开始点和结束点必须保证以外，从开始点到结束点的整个过程中均要求保持同步；底层同步即系统同步，也称为媒体内部同步。该层同步是要完成合成同步所描述的各媒

6、体对象内数据流间的时序关系，要根据具体多媒体系统性能参数来进行。一、多媒体时间同步关系多媒体的同步就是指各个媒体间的发生时间顺序的关联问题，这就不得不去面对一个时间的先后关系问题。3.1媒体间的时间顺序关系图3.1两个对象中的关系媒体类型可以分为连续媒体和离散媒体。连续媒体就是在时间上是连续的占有一定的时间，并且媒体的每个单元的播放时间相同。离散媒体包括文字和静态图像等,它们不占有时间域,表现为显示或不显示两种状态,它们不随时间变化,但在具体应用时,同样可以赋予时间特性。图3.1表示的是两种媒体对象中的典型的七种时间关系，其他的时间关系都是由这其中关系直接或间接组合。主要关系：A在B之前无混叠

7、；A在B之前有混叠A先结束；A和B同时发生但是A先结束；A和B同时发生同时结束；A刚完成，B接着发生；B先发生,A先结束；B先发生A和B同时结束。3.2媒体间的时间同步媒体中的时间同步主要分为两步：媒体对象的内部同步和媒体对象间的同步。媒体对象内部同步主要是指一种连续媒体各个单元之间的时间关系，比如视频中图像信号的发送，每个帧之间的时间关系，如图3.2：图3.2媒体对象间的同步指不同媒体对象之间的