在Android平台上合成视频一般使用MediaCodec进行硬编码,使用MediaMuxer进行封装,但是因为MediaMuxer支持格式有限,一般会采用ffmpeg封装,比如监控一般使用mpeg2ts格式而非MP4,这是因为两者对帧时pts等信息封装差异导致应用场景不同。
数据流转
相机帧数据输出到编码器mediacodec经过h264编码输出压缩数据 MediaCodec.BufferInfo
经由Mpeg2TsUtils传递给ffmpeg ,ffmpeg初始化AVFormatContext 输出上下文添加视频流
将编码器输出帧重新封装AVPacket 写入输出流。
1.1 编码器输出对接
定义 IMuxer 实现编码输出流封装 ,并定义Mpeg2TsMuxer 实现mpeg2ts格式封装
1 IMuxer
public abstract class IMuxer {
protected String filePath;
...
public IFrameMuxer(...) {
...
}
.....
public abstract void start();
public abstract void stop();
public abstract void writeSampleData(boolean videoTrack, ByteBuffer outputBuffer, MediaCodec.BufferInfo bufferInfo);
...
}
2 Mpeg2TsMuxer
....
public class M2TMuxer extends IMuxer {
...
public Mpeg2TsMuxer(...) {
...
M2TUtils.init(filePath, w, h);
}
...
@Override
public void config(ByteBuffer buffer) {
int size = buffer.capacity();
M2TUtils.config(buffer,size);
}
@Override
public void start() {
M2TUtils.start();
}
@Override
public void stop() {
M2TUtils.stop();
}
@Override
public void writeSampleData(boolean videoTrack, ByteBuffer outputBuffer, MediaCodec.BufferInfo