论文: Structural-RNN: Deep Learning on Spatio-Temporal Graphs
论文地址: https://arxiv.org/pdf/1511.05298.pdf
作者提出一种基于st-graph的RNN混合模型Structural-RNN(S-RNN),该模型特点是捕捉人体与周围环境中物体之间的相关性从而对人物未来的运动对预测。不用于其他模型针对mocap数据集进行学习,S-RNN还适用于对于真实环境下的数据学习,例如视频或图片。这里将重点讨论针对mocap数据集的训练以及效果。
Table of Contents(目录)
Background (论文背景)
Spatio-temporal graph
Spatio-temporal graph是S-RNN模型的基础,它是一种用于描述高层级时空关系结构的工具,图中的结点代表了问题的元素,边代表了它们之间在时间和空间上的联系。如图中人物与两个关键物体。