【论文阅读】【3d目标检测】HVPR: Hybrid Voxel-Point Representation for Single-stage 3D Object Detection

最新推荐文章于 2024-10-27 08:15:00 发布

原创

最新推荐文章于 2024-10-27 08:15:00 发布 · 1.6k 阅读

5 ·

CC 4.0 BY-SA版权

文章标签：

#目标检测 #计算机视觉 #人工智能

论文提出了一种名为HVPR的混合体素-点表示方法，用于单阶段3D对象检测。该方法结合了体素和点云特征的长处，通过交互矩阵计算和注意力机制融合特征。作者还引入了voxel内存来提高交互效率，并利用3D尺度特征考虑点云的稀疏性。实验表明，提出的Attentive Multi-scale Feature Module (AMFM)显著提升了检测效果。尽管结果可能不如某些方法，但其速度优势使其成为一个合理的比较选择。

论文标题：HVPR: Hybrid Voxel-Point Representation for Single-stage 3D Object Detection
源码地址：https://cvlab.yonsei.ac.kr/projects/HVPR

延世大学出品
文章认为voxel的方法和point的方法各有优劣，这是一个老生常谈的问题文章让读者耳目一新的地方是两者的一种新结合方式及一种省时省力的方式来调用point feature。

老规矩上图：
在这里插入图片描述

首先讲讲怎么提取voxel和point的特征：
对于voxel：
我们首先划分voxel的范围这里作者划分voxel的范围是直接采用pillar的形式对于其中的点采用的是一个tiny pointnet的形式并跟着一个max pool的操作（这里为啥不用VFE呢我也不太清楚可能是为了承袭pointpillar中的操作？）

对于point：
直接使用的是pointnet++的SA和FP层得到local feature的交互。

随后便是文章的重点：
如何进行上述两种feature的交互呢？作者首先计算voxel和points的交互矩阵：
在这里插入图片描述
其中C为一个NM的矩阵，N是voxel的个数 M便是points的个数我们对于这个交互矩阵取每个voxel的权重值：

取出每个voxel对应points的value在前k个的值