OBS源码分析--视频采集显示

最新推荐文章于 2025-03-29 08:30:00 发布

thinkpadlove

最新推荐文章于 2025-03-29 08:30:00 发布

阅读量5.3k

点赞数 2

分类专栏： C++ C 文章标签：视频源码

本文链接：https://blog.youkuaiyun.com/dong_zhihong/article/details/71601537

版权

C++ 同时被 2 个专栏收录

40 篇文章

订阅专栏

16 篇文章

订阅专栏

OBS如何进行初始化视频采集的：

首先，在OBS的初始化程序中，会调用ResetVideo==>AttemptToResetVideo==>obs_reset_video==>obs_init_video==>video_output_open==>if (pthread_create(&out->thread, NULL, video_thread, out) != 0)

最后创建了video_thread，我们看看video_thread线程的处理流程：

在video_thread中，一直等待update_semaphore后，这个信号应该是采集到视频图像后post出来的；

obs_video_thread==>output_frame==>output_video_data==>video_output_unlock_frame==>update_semaphore；

可以看到在obs_video_thread线程中，通知video_thread线程对采集的数据编码推流；

后面再分析具体分析下obs_video_thread线程，先看看win-dshow如何采集视频的：

首先在win-dshow.cpp中主要实现音视频采集功能：

通过UpdateVideoConfig中注册OnVideoData函数，UpdateVideoConfig在

device.cpp中，用dshow接口会调用HDevice::Receive接口将获取的音视频回调，

在device.cpp中，SetupVideoCapture，而在这个函数中会调用：

videoCapture = new CaptureFilter(info);

初始化一个采集过滤器，videoCapture对象中包含了一个pin的成员对象，该成员对象实现了Receive函数：

STDMETHODIMP CapturePin::Receive(IMediaSample *pSample)
{
if (flushing)
return S_FALSE;
if (pSample)
captureInfo.callback(pSample);
return S_OK;
}

在SetupVideoCapture中会调用下面语句注册接收回调：

info.callback = [this] (IMediaSample *s) {Receive(true, s);};

在device的Receive处理函数中，首先通过GetPointer获取到数据指针，然后调用GetTime获取数据的时间，再调用SendToCallback传到device的videoConfig.callback中处理，而videoConfig.callback是在UpdateVideoConfig中被注册的，后面再详细看这个接口如何被调用的；

好了，现在已经大概了解了流程了：

device.cpp中通过SetupVideoCapture注册回调，然后Receive回调中通过SendToCallback将采集的数据发送到videoConfig.callback中处理；

videoConfig.callback注册的其实是一个叫OnVideoData的回调函数：

在OnVideoData中调用obs_source_output_video(source, &frame);将采集的数据传到DShowInput的source的async_cache和async_frames中；

然后source->async_active = true;将异步队列置为活跃状态；

好了，数据已经采集，并放到队列里面了，下面怎么送去显示，编码呢？

obs-source.c中，有两个关键函数：

get_closest_frame

obs_source_get_frame

及一个关键变量：

cur_async_frame

在win-dshow中将采集到的音视频数据存入source的async_frames中后，通过obs_video_thread线程，每隔一段时间调用get_closest_frame从source的