安卓音视频入门难，分享一份杭州某大厂音视频内部文档

前言

最近在写作过程中，我注意到很多读者私下向我提问，他们对安卓音视频方面非常感兴趣，但苦于没有系统的学习方法。今天，我想和大家分享一些我在音视频开发方面的经验。

首先，要学习音视频开发，你需要掌握一些基础知识点，这些知识点包括：

1. FFmpeg：这是一款强大的音视频处理库，可以帮助你进行音视频编解码、转码、流媒体传输等功能。
2. MediaCodec：这是Android SDK自带的编解码器，能够帮助你进行音视频的编解码操作。
3. OpenGL ES：这是一款使用GPU进行图像处理的API，可以帮助你在移动设备上实现高性能的图像处理。
4. H.264和H.265：这两种都是图像编码压缩算法，能够帮助你了解音视频压缩编码的基本原理和实现方法。
5. YUV420P、NV21、YUV_420_888以及I420：这些都是常见的视频编码格式，需要了解它们之间的差异和适用场景。
6. YUV和RGB之间的转换：这是音视频处理中非常基础的知识点，需要掌握它们之间的转换方法和实现方式。

为什么要学习音视频技术？

首先，音视频开发人员的薪资通常比较高，根据某招聘网站的公开统计数据，音视频行业的工资在10k-20k的占比为12%，20k-30k的占比为45%，30k-k的占比为35%，35k以上的占比为13%。这说明音视频行业的薪资水平相对较高，这也是由于音视频技术人才非常稀缺所致。

其次，音视频开发的就业机会比较多。就业场景分布广泛，可以从事影视制作、教育、游戏、直播、通信等多个领域。随着5G技术的不断发展，音视频在互联网中的应用越来越广泛，因此音视频高端领域的人才严重短缺。

此外，掌握音视频技术可以让你的职业发展更加稳定。由于音视频技术的门槛比较高，竞争相对较小，因此掌握了音视频技术可以让你的职业发展更加稳定。同时，音视频技术也在不断更新和发展，掌握了音视频技术也可以让你在未来的职业发展中更具竞争力。

音视频自学的难点

1. 音视频自学非常困难，网上通俗易懂的难找到
2. 网上部分资源是对应的开源版本较低，比如雷霄骅(雷神)博客的FFmpeg版本较低
3. 音视频涉及大量的开源库和协议
4. 比如ffmpeg的编译，如果不熟悉各种编译报错
5. Janus编译涉及各种开源组件编译不通过
6. 比如WebRTC涉及的RTP RTCP SDP STUN等协议
7. 部分嵌入式音视频的朋友技术面窄，技术不深入
8. 比如有同学做了2年的音视频驱动，一帧音频能持续播放多久都不明白

总之，学习音视频开发有不少难点痛点，

在这我也努力为大家解决这些学习痛点，整理了一份音视频开发进阶文档，让初学者可以比较“柔顺丝滑”地入门，即使是老司机也能得到不少收获。

《Android音视频开发进阶指南》

这份《Android音视频开发入门进阶核心笔记》是博主有幸在杭州某大厂任职时的内部培训文档，在内部论坛收获一致好评。
以下是这份开发文档的部分章节：

第1章Android音视频硬解码篇

• 音视频基础知识
• 音视频硬解码流程：封装基础解码框架
• 音视频播放：音视频同步
• 音视频解封和封装：生成一个MP4

第2章使用OpenGL渲染视频画面篇

• 初步了解OpenGL ES
• 使用OpenGL渲染视频画面
• OpenGL渲染多视频，实现画中画
• 深入了解OpenGL之EGL
• OpenGL FBO数据缓冲区
• Android音视频硬编码：生成一个MP4

第3章Android FFmpeg音视频解码篇

• 1.FFmpeg so库编译
• 2.Android 引入FFmpeg
• 3.Android FFmpeg视频解码播放
• 4.Android FFmpeg +OpenSL ES音频解码播放
• 5.Android FFmpeg +OpenGL ES播放视频
• 6.FFmpeg简单合成MP4:视屏解封与重新封装
• 7.Android FFmpeg 视频编码