QT中VideoProbe的简介和实现

QT与OpenCV图像采集
本文介绍如何在Android设备上利用QT的QVideoProbe组件实现从摄像头动态截取图片,并将其转换为OpenCV的Mat格式,以便进行图像处理。文章详细讲解了QVideoProbe的工作原理及其与OpenCV结合的方法。
一、遇到问题
       在Android机上使用QT进行图像处理程序设计的时候,遇到的一个比较明显的问题就是图片采集的问题----摄像头获得是实时的视频,如果我们想从中动态地截获图片,并且转换成Mat的格式,那么仅仅是静态的imagecapturee就无法完成,必须要依靠 VideoProbe机制。
二、基本情况
我们参考QT的相关文档:
QVideoProbe class允许你监控正在播放或者记录的视频
它的头文件
#include <QVideoProbe>
qmake:    QT += multimedia
Inherits:    QObject
成员函数
Public Functions
    QVideoProbe(QObject *parent = Q_NULLPTR)
    ~QVideoProbe()
bool     isActive() const
bool     setSource(QMediaObject *source)
bool     setSource(QMediaRecorder *mediaRecorder)

可以发出两个信号,其中比较重要的是后面一个videoFrameProbed
void     flush()
void     videoFrameProbed(const QVideoFrame &frame)

  基本例子,比如打开视频:

QMediaPlayer *player = new QMediaPlayer();
QVideoProbe *probe = new QVideoProbe;
connect(probe, SIGNAL(videoFrameProbed(QVideoFrame)), this, SLOT(processFrame(QVideoFrame)));
probe->setSource(player); // Returns true, hopefully.
player->setVideoOutput(myVideoSurface);
player->setMedia(QUrl::fromLocalFile("observation.mp4"));
player->play(); // Start receiving frames as they get presented to myVideoSurface

同样可以打开QCamera

三、编写代码
它的主要结构(流程)是这样的,我们创建QMl的代码:
img_708a41f7d0c7e870100d1933269a7fce.png
在qml中生成camera和probe对象。这个probe对象是对原始QVideoProbe的重新封装,原始的QVideoProbe在
img_bc4cc18d6c1c2277c10eb6a67fc026d5.png
看的更清楚一些
img_2fc816b3502394d8a7727cb291f16894.png

probe对象中,首先通过调用摄像头,将videoframeprobed信号和processframe槽对应起来。这样一旦有视频probed则自动触发processframe。
img_26d9c6268bd984cd8d5587b3e22727d8.png
注意在这行代码中
_camera = qvariant_cast<QCamera*>(_qmlCamera->property("mediaObject"));
是c++调用qml对象的方法,是将qmlcamera强转为qcamera的一句
videoFrameProbed是自动触发的信号,其结果将被 processFrame截获并处理。信号和槽的方式是可以直接带变量传递的。
img_11f308447b5734fc78b9df28791217fe.png
在process中,最主要的步骤就是QVideoFrame格式和Mat格式的转换。这个目前还没有非常好的方法,只能在NoHandle模式下进行灰度处理。但是对于图像处理来说已经能够解决一些问题。需要注意的是,最后采集的结果,通过
img_c896d7712d776097d37e27a527112d0d.jpe
也就是
img_89135c48a52375abadf07aa9e9468258.png
的模式将其直接推送到qml这里
img_5707343950f4dbefe995ca0ba09312db.png

四、小结
probe这种模式还是比较简单的,而且经过封装后能够很好地和OpenCV结合起来,用于图像采集处理。





目前方向:图像拼接融合、图像识别 联系方式:jsxyhelu@foxmail.com
敬告:该系列的课程在抓紧录制更新中,敬请大家关注。敬告: 该系列的课程涉及:FFmpeg,WebRTC,SRS,Nginx,Darwin,Live555,等。包括:音视频、流媒体、直播、Android、视频监控28181、等。  我将带领大家一起来学习:Qt麦克风数据探测、FFmpeg解码音频数据、音频波形图、音频播放器。具体内容包括:1.Qt采集麦克风并探测数据,生成动态矩形图。2.FFMpeg解码音频数据,生成PCM数据,并绘制波形图。3.音频播放器实战。 音视频与流媒体是一门很复杂的技术,涉及的概念、原理、理论非常多,很多初学者不学 基础理论,而是直接做项目,往往会看到c/c++的代码时一头雾水,不知道代码到底是什么意思,这是为什么呢? 因为没有学习音视频流媒体的基础理论,就比如学习英语,不学习基本单词,而是天天听英语新闻,总也听不懂。所以呢,一定要认真学习基础理论,然后再学习播放器、转码器、非编、流媒体直播、视频监控、等等。 梅老师从事音视频与流媒体行业18年;曾在永新视博、中科大洋、百度、美国Harris广播事业部等公司就职,经验丰富;曾亲手主导广电直播全套项目,精通h.264/h.265/aac,曾亲自参与百度app上的网页播放器等实战产品。目前全身心自主创业,主要聚焦音视频+流媒体行业,精通音视频加密、流媒体在线转码快编等热门产品。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值