论文笔记(RF-pose)
论文:Through-Wall Human Pose Estimation Using Radio Signals
1、摘要:
介绍了一种深度神经网络方法,利用WiFi频率中穿过墙壁并反射到人体的无线电信号(射频,RF),来估计人体的二维姿态。由于无法对无线电信号进行标注,因此使用最先进的视觉模型( OpenPose )来提供跨模式的监督。具体来说,在训练过程中,系统使用同步的无线和视觉输入,从视觉流中提取姿态信息,并利用其指导训练过程。一旦经过训练,网络只使用无线信号进行姿态估计。
2、Related Work
RF-Pose传输低功耗无线信号(比WiFi低1000倍),并从环境中观察其反射。
Bottom-up methods:采用自底向上的方法,首先从射频信号图像中学习检测出姿态的所有关键点,然后使用后处理来关联属于同一个人的关键点。
cross-modal teacher-student networks:跨模态师生网络,它将以一种数据模态学到的知识转移到另一种数据模态。过去的工作只传输分类层次的判别知识,而这一网络在密集的关键点置信度图上传输更丰富的知识。
3、Method