spice局部视频流的判断改进

本文探讨了在视频流检测中,如何应对窗口移动、尺寸变化和不同流的混合导致的频繁流切换问题。提出移除目标区域一致性的限制,并提出区分窗口移动与新流的策略,以及Win7和Win10环境下处理指令的不同方式。讨论了客户端修改的需求,以及如何通过特定指令判断是否属于现有流而非新创建的流。

本文地址:https://blog.youkuaiyun.com/MagicFMan/article/details/127825558,严禁转载,后果自负

背景

当前spice判断一个连续图片是不是视频数据的方法:
连续帧满足:
(1) 图片width、height都相等;
(2) 图片绘制的目标区域都相同。

问题

(1) 当播放器在播放视频时,移动、窗口尺寸微调都会导致:退出流->检测流->进流;
(2) 遇到过chrome网页播放视频的一个场景,视频在播放时,区域位置会不断发生几个像素偏移,造成chrome视频频繁退流、进流。
(3) 窗口播放时,在进流之前,不断移动窗口,是无法检测进入到局部流的。 这些场景都会造成流的频繁退出,同时在检测进流的过程中,大量图片采用普通压缩方式,造成带宽峰值升高。

分析

进流的目的:采用h264压缩,降低带宽。采用h264压缩的条件:连续图片需要有固定的width和height。
也就是说我们在检测的时候可以去掉目标区域相同这一限制。
当前去掉目标区域限制的影响:桌面上同时播放两个大小相同的流就会进入同一个流,造成关键帧增多,影响带宽。

问题就简化为:当一条指令下发时,如果当前有个流的图片大小和该指令相同,但是区域不相同,如何判断指令是不是属于这个流。即:该指令是由流移动、或窗口大小发生变化而来,还是一个新的流。
在这里插入图片描述

评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

宸汐软件

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值