本文主要探讨了WebRTC的本地音频采集流程，从WebRTC原生的音频采集接口开始，详细阐述了AudioDeviceModule及其平台特定实现，如Windows下的Wave和Core Audio APIs方案。接着介绍了Chromium如何通过WebRtcAudioDeviceImpl、WebRtcAudioCapturer和WebRtcAudioRenderer实现音频采集和渲染的分离，以及涉及到的跨进程通信。最后，提到了在Chromium中与HTML5媒体流相关的接口MediaStreamAudioSource和WebMediaStreamTrack。
上一篇博文介绍了本地视频采集，这一篇就介绍下音频采集流程，也是先介绍WebRTC原生的音频采集，再介绍Chromium源码对它的定制。
1. WebRTC原生音频采集
先介绍一下WebRTC中与音频采集貌似相关的接口概念：
结构上看起来是不是和视频Track的结构类似？不过前面提过，如果你以对称的思维，在此结构中找出与视频track相似的采集源和输出源，那就肯定无功而返了，LocalAudioSource对AudioSourceInterface的实现就是一个空实现，没有了音频源，那音频处理接口AudioProcessorInterface和输出接口AudioRenderer都成了无米之炊了。
这些接口先摆在这，可能类似于AudioCapturer的框架正在实现的途中，也可能这些接口有别的用处，比如远程音频流的抽象等，这里就暂且搁置，先记下有这回事吧。这里只谈WebRTC本地音频的采集处理。前面介绍音视频接口的时候也提到的，本地音频的采集由AudioDeviceModule接口统一封装:
AudioDeviceModule是个大而全的接口，恨不得将所有音频相关的接口都封装在里面（实际也差不多了），
最低0.47元/天 解锁文章
扫一扫
1315
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
