android--多媒体架构

《android--多媒体架构》由会员上传分享，免费在线阅读，更多相关内容在教育资源-天天文库。

1、Android多媒体MediaFramework处于Libraries这一层，这层的代码不是用Java实现的，一般是C/C++实现，它们通过Java的JNI方式调用。一、多媒体架构基于第三方PacketVideo公司的OpenCORE来实现，支持所有通用的音频/视频/静态图像格式，包括：MPEG4、H.264、MP3、AAC、AMR、JPG、PNG、GIF等。从功能上分为两部分，一是音/视频的回放（PlayBack），二是音视频的纪录（Recorder）。CODEC(编解码器)使用OpenMAX1Linterface接口进行扩展，可以方便地支

2、持hardware/softwarecodecplug-ins。OpenCore多媒体框架有一套通用可扩展的接口针对第三方的多媒体遍解码器，输入/出设备等等。多媒体文件的播放、下载，包括3GPP,MPEG-4,AACandMP3containers流媒体文件的下载、实时播放，包括：3GPP,HTTPandRTSP/RTP动态视频和静态图像的编解码，如：MPEG-4,H.263andAVC(H.264),JPEG语音编码格式：AMR-NBandAMR-WB音乐编码格式：MP3,AAC,AAC+视频和图像格式：3GP、MPEG-4andJPEG视

3、频会议：基于H324-Mstandard二、MediaFramework名词解释1.OpenCore介绍OpenCore是Android多媒体框架的核心，所有Android平台的音视频采集，播放的操作都是通过它来实现。通过OpenCore程序员可以方便快速的开发出想要的多媒体应用程序，例如：音视频的采集，回放，视频会议，实时的流媒体播放等等应用。2.OpenCore代码结构OpenCore的代码在Android代码的External/Opencore目录中。这个目录是OpenCore的根目录，其中包含的子目录如下所示：Øandroid：这里面

4、是一个上层的库，它实现了一个为Android使用的音视频采集，播放的接口，和DRM数字版权管理的接口实现。Øbaselibs：包含数据结构和线程安全等内容的底层库Øcodecs_v2：音视频的编解码器，基于OpenMAX实现Øengines：核心部分，多媒体引擎的实现Øextern_libs_v2：包含了khronos的OpenMAX的头文件Øfileformats：文件格式的解析（parser）工具Ønodes：提供一些PVMF的NODE，主要是编解码和文件解析方面的。Øoscl：操作系统兼容库Øpvmi：输入输出控制的抽象接口Øproto

5、cols：主要是与网络相关的RTSP、RTP、HTTP等协议的相关内容Øpvcommon：pvcommon库文件的Android.mk文件，没有源文件。Øpvplayer：pvplayer库文件的Android.mk文件，没有源文件。Øpvauthor：pvauthor库文件的Android.mk文件，没有源文件。Øtools_v2：编译工具以及一些可注册的模块。1.OpenMax介绍ØOpenMAX是Khronos制定的API，Khronos也是OpenGL的制定者。ØOpenMAX是无授权费、跨平台的应用程序接口API，通过媒体加速组件能

6、够在开发、集成和编程环节中实现跨多操作系统和处理器硬件平台，提供全面的流媒体编解码器和应用程序便携化。Ø在架构底层上为多媒体codec和数据处理定义了一套统一的编程接口(OpenMAXILAPI)，对多媒体数据的处理功能进行系统级抽象，为用户屏蔽了底层细节。因此多媒体应用程序和多媒体框架通过OpenMAXIL可以以一种统一方式来使用codec和其他多媒体数据处理功能，具有了跨越软硬件平台的移植性。ØOpenMax在系统中的位置ØOpenMax层次nOpenMAXAL(ApplictionLayer)OpenMAXALAPI在应用程序和多媒体中

7、间件之间提供了一个标准化接口，多媒体中间件提供服务以实现被期待的API功能。AL向多媒体接口提供应用册便携性。nOpenMAXIL(IntegrationLayer)OpenMAXIL作为音频，视频和图像编解码器，能与多媒体编解码器交互，并以统一的行为支持组件（例如资源和皮肤）。编解码器供应商必须写私有的或者封闭的接口集成进移动设备。IL的目的是使用特征集合为编解码器提供一个系统抽象，为解决多个不同媒体系统之间轻便性的问题。nOpenMAXDL(DevelopmentLayer)OpenMAXDL定义了一个API，它是音/视频和图像功能的集合

8、。硅供应商能够在一个新的处理器上实现并优化其，然后编解码供应商使用其来编写更广泛的编解码器功能。它包括音频信号的处理功能，如FFT和filter；图像原始处理，如颜