基于iOS的网络音视频实时传输系统（五）- 使用VideoToolbox硬解码H264

最新推荐文章于 2023-03-18 21:59:06 发布

置顶

AmoAmo_Amo

最新推荐文章于 2023-03-18 21:59:06 发布

阅读量2.3k

点赞数

分类专栏：笔记音视频编解码_学习文章标签： h264 网络视频 VideoToolbox 硬解码

本文链接：https://blog.youkuaiyun.com/a997013919/article/details/78215544

版权

本文介绍了如何在iOS应用中使用VideoToolbox进行H264视频的硬解码，包括初始化编码器session、处理回调、包装NALUnit、创建CMSampleBuffer等关键步骤，旨在实现高效、流畅的音视频实时传输。参考了多篇技术博客以深入理解解码过程。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

下载

GitHub：

client 端：https://github.com/AmoAmoAmo/Smart_Device_Client

server端：https://github.com/AmoAmoAmo/Smart_Device_Server

另还写了一份macOS版的server，但是目前还有一些问题，有兴趣的去看看吧：https://github.com/AmoAmoAmo/Server_Mac

使用VideoToolbox硬解码H264。

关于这一部分，由于是第一次使用，便不班门弄斧，

在参考文章中列举了不少说得很详细的博客。

关于最终的效果，可以参考第一篇的文章

部分过程

初始化编码器session

- (void)initVideoToolBox {
    if (!mDecodeSession) {
        // 把SPS和PPS包装成CMVideoFormatDescription
        const uint8_t* parameterSetPointers[2] = {mSPS, mPPS};
        const size_t parameterSetSizes[2] = {mSPSSize, mPPSSize};