Android mediaPlayer学习笔记http://blog.sina.com.cn/s/articlelist_1937350040_0_2.html

几个不错的博客：

http://blog.sina.com.cn/s/articlelist_1937350040_0_2.html

http://blog.youkuaiyun.com/zjc0888/article/list/2

http://dongyulong.blog.51cto.com/1451604/554639

http://wenku.baidu.com/view/0e1abf3e5727a5e9856a6152

http://blog.youkuaiyun.com/tx3344/article/details/8109185

在framwork\av\media\libstagefright\codecs目录下包括常用的解码库，包括aac，amr，MP3等。

 

在frameworks\native\include\media\openmax目录下是openmax的通用头文件，其实就是openmax协议在代码上的实现。规定了一些列的调用接口。包括：

OMX_Core.h     openmax 的核心接口。

OMX_Component.h 具体的一个编解码器实例的需要提供的接口。

 

 

SoftMP3继承自SimpleSoftOMXComponent继承自SoftOMXComponent，是真正的解码器实例

 

softOMXComponent主要的虚方法，也就是需要具体解码器实现的方法：

sendCommand（）   发送命令

getParameter（）    获取参数

setParameter（）    设置参数

getConfig()          获取配置

setConfig()                    设置配置

getExtensionIndex()

useBuffer()                        使用buffer

allocateBuffer()       分配buffer

freeBuffer()                         释放buffer

emptyThisBuffer()             读取buffer中的数据并编解码

fillThisBuffer()

getState                                      获取状态

 

AwesomePlayer分别用了mVideoRenderer做视频输出、mAudioPlayer做音频输出。他们分别调用android图像和音频的相关服务。这俩部分是android平台中十分重要的2块，mVideoRenderer和mAudioPlayer就组成了播放器中output的部分。音视频数据先放到一个缓冲里面给音视频解码器解码，然后把结果放到一个缓冲区里面并通知AwesomePlayer，AwesomePlayer再通过mVideoRender，mAudioPlayer渲染接口将数据渲染出去。

mVideoSource和mAudioSource都是一个OMXCodec实例,OMXCodec的mSoruce变量就是mVideoTrack或者mAudioTrack.

 

 

OMXCodecObserver 是编解码的observer，继承自BnOMXObserver是一个binder

 

在setDataSource的时候创建StageFright。

 

整个音视频编解码包括两个进程分别是应用进程和MediaPlayerService，其中OMXCodec IOMXAwesomePlayer都是位于应用进程。OMX位于service进程。

 

如下图为Extractor的创建流程图：

得到extractor之后，通过setVideoSource() setAudioSource()产生独立的mVideoTrack(视频)、mAudioTrack(音频)数据流，分别为音视频解码器提供有各自需要的数据流。

 

OMX_CALLBACKTYPE OMXNodeInstance::kCallbacks =
{
  &OnEvent, <--------------- omx_message::EVENT
  &OnEmptyBufferDone, <----- omx_message::EMPTY_BUFFER_DONE
  &OnFillBufferDone <------- omx_message::FILL_BUFFER_DONE
} 

 

 

 

 

 

 

 

 

 

 

如下为编解码到渲染流程：

在onVideoEvent中调用read，read作用是发送一片未解码的数据给openmax得到解码的数据的buffer，然后把这个buffer给视频的render渲染。

 

如下图为编解码输入输出缓冲区的创建流程图，简单的所就是先通过getParameter获得缓存区的大小个数等参数，然后请求分配对应个数大小的缓存区。