FFmpeg 打包mediacodec 编码帧 MPEGTS

原创

已于 2023-09-07 11:16:49 修改 · 1.4k 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#ffmpeg

于 2023-07-31 18:21:06 首次发布

本文介绍了如何在Android上利用MediaCodec进行视频编码，并结合FFmpeg进行MPEGTS封装。详细阐述了数据流转过程，包括编码器输出对接、JNI方法实现以及MPEGTS封装的具体步骤，如初始化ffmpeg上下文、写入编码帧等。

在Android平台上合成视频一般使用MediaCodec进行硬编码，使用MediaMuxer进行封装，但是因为MediaMuxer支持格式有限，一般会采用ffmpeg封装，比如监控一般使用mpeg2ts格式而非MP4,这是因为两者对帧时pts等信息封装差异导致应用场景不同。

数据流转

相机帧数据输出到编码器mediacodec经过h264编码输出压缩数据 MediaCodec.BufferInfo

经由Mpeg2TsUtils传递给ffmpeg ，ffmpeg初始化AVFormatContext 输出上下文添加视频流

将编码器输出帧重新封装AVPacket 写入输出流。

1.1 编码器输出对接

定义 IMuxer 实现编码输出流封装，并定义Mpeg2TsMuxer 实现mpeg2ts格式封装

1 IMuxer

public abstract class IMuxer {

    protected String filePath;
    ...

    public IFrameMuxer(...) {
      ...
    }

 .....

    public abstract void start();
    public abstract void stop();
    public abstract void writeSampleData(boolean videoTrack, ByteBuffer outputBuffer, MediaCodec.BufferInfo bufferInfo);

   ...
}

2 Mpeg2TsMuxer

....

public class M2TMuxer extends IMuxer {
    ...
    public Mpeg2TsMuxer(...) {
        ...
        M2TUtils.init(filePath, w, h);
    }


   ...

    @Override
    public void config(ByteBuffer buffer) {
        int size = buffer.capacity();
        M2TUtils.config(buffer,size);
    }

    @Override
    public void start() {
     
        M2TUtils.start();
        
    }

    @Override
    public void stop() {
       
        M2TUtils.stop();
    }

    @Override
    public void writeSampleData(boolean videoTrack, ByteBuffer outputBuffer, MediaCodec.BufferInfo bu

最低0.47元/天解锁文章