TEA: Temporal Excitation and Aggregation for Action Recognition阅读笔记
一、简介
考虑时间建模在视频中行为识别的重要性,包括运动激发模块(ME)和一个多时间聚合模型(MTA),将他们嵌入一个标准ResNet块中,重新生成一个时间激发和聚合块,ME和MTA分别作用在短程运动和长程聚集上。ME模块利用从时空特征中计算的特征等级时间差异去激活特征的动作敏感通道。MTA模块将局部卷积变形为一组子卷积,形成一个层次化剩余结构。
创新点:
使用ME模块来代替传统的提取手工光流后输入2D基于卷积网络的双流框架来进行动作识别,该模块不需要将时空特征分流训练,而是将运动建模直接整个整合进时空特
原创
2020-08-13 11:23:31 ·
1665 阅读 ·
0 评论