【学习】从零开始的Android音视频开发(11)——OMX:Codec部分中的OMXCodec和OMX事件回调流程

最新推荐文章于 2023-03-09 16:42:39 发布

Panic Lin

最新推荐文章于 2023-03-09 16:42:39 发布

阅读量3.2k

点赞数

分类专栏： Android音视频开发文章标签： android 学习音视频

本文链接：https://blog.youkuaiyun.com/PanicLin/article/details/124432928

版权

Android音视频开发专栏收录该内容

14 篇文章

订阅专栏

前面讲了OMX服务主要完成三个任务:NodeInstance列表的管理、NodeInstance的操作、事件的处理。最后这个事件处理就是放大要看的内容。要一步一步进行编解码操作，事件传递进行通信是必不可少的环节

`OMXCodec`与`OMX callback`事件的处理时序图

在这里插入图片描述

从时序图来看，首先要建立一个OMXCodecObserver类，该类是OMXCodec的内部类，在create函数中被创建，并把对应的OMXCodec加入自己的观察范围内，在Create中

在这里插入图片描述

其次初始化它的callback事件和事件的派发处理函数。那么OMX主要的callback事件有哪些呢？我们可以查看OMXNodeInstance.cpp的kCallbacks函数
在这里插入图片描述

callback在allocateNode定义
在这里插入图片描述

即每个Component对应一组回调事件，这些回调事件由哪些函数返回呢？查看OMX_Core.h

在这里插入图片描述

有了callback事件，如何dispatch？我们在allocateNode函数中已经定义好dispatch的函数了
在这里插入图片描述

如何从OMX中分发事件到OMXCodec

有了Observer、Callback Event、CallbackDispatcher，那么一个时间如何从OMX分发到OMXCodec？

以下以EmptyBuffer流程来具体看
在这里插入图片描述

首先查看mVideoSource->read，实际上就是调用OMXCodec::read函数
在这里插入图片描述

接下来看看drainInputBuffer的实现代码(截取部分)
在这里插入图片描述

在OMXCodec::fillOutputBuffer(BufferInfo *info)中会调用下图的函数
在这里插入图片描述

fillOutputBuffer作用是把输出通道中的输出缓冲区逐个传递给输出Buffer。在OMXCodec中的fillOutputBuffer函数调用mOMX->fillBuffer发送消息给OMX，相当于把缓冲区传递给OMX。以上是第一次执行OMXCodec::read时的操作，当整个编解码流程运行起来之后，会面临一个输入输出缓冲区更新的问题

缓冲区更新过程

输入缓冲区更新过程为，如果一个输入串冲去数据被读取完，OMX就触发事件omx_message::EMPTY_BUFFER_DONE通知上层，在这个事件处理流程中，会根据发送来的bufferid找到对应的输入缓冲区，然后把这个缓冲区传递给drainInputBuffer，继续往下执行，在OMXCodec::on_mseeage中有如下代码

在这里插入图片描述

输出缓冲区更新过程如下：解码完毕后，OMX组件触发omx_message::FILL_BUFFER_DONE,输出缓冲区会被传出交给上层使用(传递给SurfaceFlinger来显示)，使用完后需要把这个缓冲区重新交给OMX。上层使用完输出缓冲区后会调用MediaBuffer::release销毁缓冲区，在这个接口中会给输出缓冲区的引用计数减一。然后调用signalBufferReturned，实际对应OMXCodec::signalBufferReturned接口。最后，下一层调用fillOutputBuffer函数，把这个缓冲区重新交给OMX

综上所述，这样就通过第一次调用drainInputBuffer触发了OMX，然后依靠OMX的事件驱动来完成数据的读取、解码操作

在这里插入图片描述