SORT论文阅读笔记

目前的想法: 若此时tracker为未更新状态,则直接使用前面匹配上的运动轨迹状态做平均预估下一帧轨迹状态,不使用KF预测。 然后使用ORU插值 为了之后的KF

最大的好处: 快

对于oc-sort的ocr , 虽然是丢失轨迹的检测值和重新出现的检测值IOU关联,但是 在遮挡期间,仍然使用KF对丢失轨迹预测,(预测后的结果你又不用来匹配 这无疑是一种浪费) ,我认为这里还是用KF的目的是通过T-remain 去找到(下图)

和当前Z-remain匹配。


OC-SORT

现有的方法对运动预测都是基于线性运动假设,对非线性运动、遮挡、低帧率视频就没有好的处理效果

SORT有三个缺点:

1.帧率很高的情况,目标位移的噪声可能就和位移大小本身差不多(因为位移会很小),这样Kalman的方差会很大。

2.由于遮挡等原因,如果没有新的轨迹和检测匹配,那目标的噪声可能会积累。证明了误差积累关于时间是平方关系。

3.Kalman主要依赖于状态估计、线性模型,把观测只作为辅助信息。作者认为现在的检测器足够强,应该已经可以把观测作为主要信息了(Observation-Centirc的来源)

一、OOS(Observation-centric Online Smoothing):减少KF带来的累积误差

bytetrack中的轨迹插值: 轨迹插值是一种有效的后处理方法来获得那些完全被遮挡的物体的框。

这个oos貌似和byte中的轨迹插值就是一回事

现在心里有个疑问 oos是按照匀速运动平滑 但是如果一个人被遮挡后 反方向走 会被追踪到吗

OCM(Observation-centric Momentum):在代价矩阵中加入轨迹的方向一致性,更好地实现匹配

三 OCR(Observation-centric Recovery):恢复由于遮挡造成的跟丢问题

其实单图像检测器其实性能还是蛮差的,他这完全抛弃估计,以检测为中心感觉误差会更差,特别是在自动驾驶等大数据集、复杂场景下,单图像的性能比激光、融合差一大截。

OCR和OOS都是为了解决被遮挡后 KF预测不可靠的问题

参考:(103条消息) [论文阅读笔记13]Observation-Centric SORT(OCSORT)论文中的公式推导-优快云博客

BoT-SORT是发表于2022年的先进的多目标跟踪算法,它结合了运动和外观信息、相机运动补偿和更准确的卡尔曼滤波状态向量,并把这些改进集成到ByteTrack,从而在MOTA、IDF1和HOTA性能指标上超过了ByteTrack,增强了目标跟踪的鲁棒性,比较适用于存在相机运动的场景。YOLOv8代码中已集成了BoT-SORT。本课程使用YOLOv8和BoT-SORT对视频中的行人、车辆做多目标跟踪计数与越界识别,开展YOLOv8目标检测和BoT-SORT多目标跟踪强强联手的应用。课程分别在Windows和Ubuntu系统上做项目演示,并对BoT-SORT原理和代码做详细解读(使用PyCharm单步调试讲解)。课程包括:基础篇、实践篇、原理篇和代码解析篇。Ÿ  基础篇包括多目标跟踪任务介绍、常用数据集和评估指标;Ÿ  实践篇包括Win10和Ubuntu系统上的YOLOv8+BoT-SORT的多目标跟踪计数与越界识别具体的实践操作步骤演示;Ÿ  原理篇中讲解了马氏距离、匈牙利算法、卡尔曼滤波器、SORT、DeepSORT和BoT-SORT多目标跟踪算法的原理,并解读了BoT-SORT论文;Ÿ  代码解析篇中使用PyCharm单步调试对BoT-SORT的代码逐个文件进行讲解。课程提供代码解析文档。相关课程:《YOLOv8+ByteTrack多目标跟踪(行人车辆计数与越界识别)》https://edu.youkuaiyun.com/course/detail/38901《YOLOv8+DeepSORT多目标跟踪(行人车辆计数与越界识别)》 https://edu.youkuaiyun.com/course/detail/38870《YOLOv5+DeepSORT多目标跟踪与计数精讲》https://edu.youkuaiyun.com/course/detail/32669 
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值