Android MediaExtractor + MediaMuxer 分离音视频

一、背景

Video和Audio通常具备多种品质，视频里有如480P、720P、1080P、2K...等，而Video中有普通音质、middle音质、HQ音质等，在目前降本增效的愿景的下，需要考虑到的降低存储成本和传输成本，因此有必要对音频和视频实现动态合成，当然这和本文标题和本文写作目的背离。本文的目的是想实现在手机端实现默认音质且其他音质的方案。

考虑到ExoPlayer可以实现切换音质，但对于MediaPlayer而言，这个是相当困难的，所有本文重点实质是解决MediaPlayer音质切换问题的第一步——音视频分离。

二、分离原理

在Android中，官方提供了MediaExtrator，虽然相比ExoPlayer自行实现的一套方案还是比较鸡肋，但对音视频动态分离，其提供的能力足矣。

MediaPlayer我们都知道，其DataSource不如ExoPlayer灵活，此外新接口MediaDataSource也不兼容早起版本，所有可以使用也就是使用Url实现中间处理过程，具体过程如下：

【数据源】 - 【Proxy】 -> 【MediaPlayer】

具体代理过程中我们不细述，这里我们会在Proxy做一些处理,如下面方式

【数据源】 -> 【音视频分离】 -> 视频Proxy -> MediaPlayer

这部分代码我们不具体处理，这里主要来说音视频分离方式。

三、核心逻辑

MediaExtractor 负责分离数据 <