Action Prediction探索

最新推荐文章于 2024-02-08 21:16:45 发布

jk_algo

最新推荐文章于 2024-02-08 21:16:45 发布

阅读量1.6k

点赞数

分类专栏： action prediction 文章标签： action prediction untrimmed video detection

本文链接：https://blog.youkuaiyun.com/small_ARM/article/details/81185404

版权

项目从Action Recognition转向Action Prediction，因为后者能在行为未完全发生时进行识别，适合实时在线异常行为检测。研究了Human Interaction Prediction的两种方法，一种利用深度时序特征，另一种结合结构上下文模型和评分融合。这两种方法都结合了空间和时间信息来预测行为。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

背景

由于项目组中有异常行为检测的项目，该项目需要对异常行为及时的报警，是real-time and online的检测。前期，项目研究了Action Recognition,而Recognition是对trimmed视频进行识别，而且是对发生完的动作进行识别，不适合项目的需求。而之后又探索了anomaly detection,这个是对异常事件的检测，但是异常事件检测采用重构的思想，即对正常行为进行训练，重构误差小，当一个没有见过的行为出现时，重构误差将会很大，用重构误差来判断一个行为是否属于异常事件，往往会出现误报警，即一个人突然快速走路也会判断为异常事件，不适合异常行为的场合。
因此，综合前面的探索，考虑到应用场景，因此把研究方向定到了Action Prediction。

Action Prediction定义：

根据论文SSNet: Scale Selection Network for Online 3D Action Prediction提及，Recognizing (predicting) an action before it is fully performed，即在行为没有全部发生时，便识别整个行为，这种操作就是行为预测。也称为early action recognition