21、毫米波雷达多光谱融合与脑电情感识别技术解析

毫米波雷达多光谱融合与脑电情感识别技术解析

在当今科技领域，毫米波雷达的人体姿态构建以及脑电情感识别都是备受关注的研究方向。下面将详细介绍毫米波雷达多光谱融合方法以及基于CANet和胶囊网络的脑电情感识别技术。

毫米波雷达多光谱融合

• 研究目标 ：利用毫米波雷达数据的多个二维频谱构建三维人体姿态，并正确关联距离 - 多普勒 - 幅度（RDM）和距离 - 角度 - 幅度（RAM）信息，同时避免引入冗余的距离特征。
• 方法概述 ：提出了一种基于Transformer编码器的多光谱融合方法。具体而言，使用基于Transformer编码器的交叉注意力机制来计算固定距离下速度和角度之间的关系，这种方式不会导致错误关联，且无需为姿态估计引入额外特征。此外，还提出了一个精炼网络来处理融合过程中丢失的RDM特征，最后使用姿态估计器从融合特征中构建三维人体姿态。

消融实验结果

方法	A1	A2	A3	A4	A5	Avg
无Transformer编码器的方法	30.2	32.9	45.0	28.2	43