20、自动驾驶中的 3D 目标检测技术综述

自动驾驶中的 3D 目标检测技术综述

1. RADAR 数据的目标检测

在部分视野或遮挡条件下,深度学习模型已成为强大的特征提取器和分类器用于感知任务。对于基于 RADAR 数据的目标检测,有以下几种方法:
- 光谱图像法 :先从光谱图像生成提案,再用 CNN 模型分类,还可借助 R - CNN 框架或单阶段检测框架进一步改进。
- 点云输入法 :
- Scheiner 等人将输入的 RADAR 点云用 DBSCAN 分成多个簇,再用 LSTM 分类。
- Schumann 等人分别用 CNN 和记忆感知的 PointNets 从静态和动态 RADAR 点中提取特征。
- Danzer 等人从 RADAR 点云估计旋转的 2D 边界框,采用 PointNet 架构提取特征和回归 2D 边界框。
- 类似 LiDAR 目标检测,RADAR 点云可量化为 2D 图像,用 CNN 提取特征和检测目标。有研究提出基于 RADAR 的检测基准,比较了 YOLOv3、PointPillars、PointNet++ 及其变体,结果显示 YOLOv3 和 PointNet++ 性能优于 PointPillars 变体。

与基于相机和 LiDAR 的目标检测相比,基于 RADAR 的目标检测因数据观测稀疏而研究不足。

2. 多传感器融合方法

多传感器融合是 3D 目标检测的热门研究方向,它能在面对破坏、故障、不利条件和盲点时提供互补和冗余信息。但不同传感器提供不同的数据表示,需要解决如何融合多传感器数据用于感知的问题。以下是几种融合方法:

相关推荐

Ubuntu 20.04下保姆级安装SUSTechPOINTS点云标注工具(含Docker避坑与uWSGI解决)

本文提供Ubuntu 20.04下SUSTechPOINTS点云标注工具的完整安装指南,涵盖Docker配置避坑与uWSGI编译问题解决。详细步骤包括环境准备、项目部署、Docker容器化配置及标注工作流实战技巧,助力研究者在3D点云目标检测领域高效构建训练数据。

weixin_30421809的博客 587

3D目标检测多模态融合综述

0前言 本篇文章主要想对目前处于探索阶段的3D目标检测中多模态融合的方法做一个简单的综述,主要内容为对目前几篇几篇研究工作的总结和对这个研究方面的一些思考。 在前面的一些文章中,笔者已经介绍到了多模态融合的含义是将多种传感器数据融合。在3D目标检测中,目前大都是将lidar和image信息做融合。在上一篇文章中,笔者介绍到了目前主要的几种融合方法,即early-fusion,deep-fusion和late-fusion,并介绍了一种基于Late-fusion的融合方法。但是在大多数研究工作中,都是以dee

有所为,有所成长 5219

基于激光雷达点云的 3D 目标检测技术综述

《基于激光雷达点云的 3D 目标检测技术综述》的阅读笔记

Mrjdk的博客 1497

【MMDetection3D】基于单目(Monocular)的3D目标检测入门实战

本文简要介绍单目(仅一个摄像头)3D目标检测算法,并使用MMDetection3D算法库,对KITTI(SMOKE算法)、nuScenes-Mini(FCOS3D、PGD算法)进行训练、测试以及可视化操作。单目3D检测,顾名思义,就是只是用一个摄像头采集图像数据,并将图像作为输入进行检测。

weixin_43799388的博客 1万+

自动驾驶目标检测综述

自动驾驶目标检测已从单一传感器、单模态方法发展为多传感器融合、端到端优化的复杂系统。尽管深度学习显著提升了性能,但**复杂场景的鲁棒性、实时性、数据效率**仍是核心挑战。未来,结合物理模型、轻量化设计、多模态交互及安全性验证,目标检测技术将向更可靠、更普适的自动驾驶系统迈进。

weixin_42263762的博客 1394

基于激光雷达点云的3D目标检测方法

基于激光雷达点云的3D目标检测方法简介基于BEV(bird’s eye view)的目标检测方法基于camera view的目标检测方法基于point-wise feature的目标检测方法 简介 根据lidar不同的特征表达方式,可以将目标检测方法分成以下4种: 基于BEV(bird’s eye view)的目标检测方法 基于camera view的目标检测方法 基于point-wise ...

lpj822的专栏 1万+

ECCV20| 3D目标检测时序融合网络

文章:An LSTM Approach to Temporal 3D Object Detection in LiDAR Point Clouds 文章链接: https://arxiv.org/pdf/2007.12392.pdf 0 前言 这是一篇来自Google-Research的研究工作,基于点云的3D目标检测目前有三个前沿的研究点,分别是:多模态、时序融合、自监督和弱监督。其中就笔者看到过和汇总过的文章而言(https://github.com/LittleYuanzi/awesome-Autom

有所为,有所成长 2021

3D 语义分割、目标检测、实例分割是什么神仙操作?TF 3D 技术让你一目了然

文 / 研究员 Alireza Fathi 和 AI 实习生 Rui Huang,Google Research 过去几年里,3D 传感器(如激光雷达、深度传感摄像头和雷达)越发普及,对于能够处理这些设备所捕获数据的场景理解技术,相应需求也在不断增加。此类技术可以让使用这些传感器的机器学习 (ML) 系统,如无人驾驶汽车和机器人,在现实世界中导航和运作,并在移动设备上创建改进的增强现实体验。 最近,计算机视觉领域开始在 3D 场景理解方面取得良好进展,包括用于移动 3D 目标检测、透明目标检..

tensorflowforum的博客 4115

自动驾驶激光点云 3D 目标检测 PointPillar 论文简述

之前有针对 VoxelNet 这篇论文做过简述,今天的主题是 PointPillar。 PointPillar 是 2019 年提出来的模型,相比于之前的点云处理模型,它有 3 个要点: 提出 Pillar 这个概念,将类 PointNets 模型能够以 Pillar 为基础单位学习点云特征 运用标准化的 2D 卷积进行后续处理 快,满足实时要求,最快的版本到达 105 Hz PointPillar 和前辈 处理点云最先需要大量的手工作业,后来 VoxelNet 第一次引入了真正的端到端的特征学习。 但

frank 的专栏 5994

一文教你读懂3D目标检测

本文共4593字,预计需要20分钟,可以先收藏再看哦1 简介目标检测是计算机视觉领域的传统任务,与图像识别不同,目标检测不仅需要识别出图像上存在的物体,给出对应的类别,还需要将该物体的位置通过最小包围框(Bounding box)的方式给出。根据目标检测需要输出结果的不同,一般将使用RGB图像进行目标检测,输出物体类别和在图像上的最小包围框的方式称为2D目标检测,而将使用RGB图像、RGB-D深度...

Z's Palace 2万+

20、自动驾驶中的3D目标检测技术:现状与展望

本文综述了自动驾驶中3D目标检测技术的研究现状,重点分析了基于雷达的目标检测方法与多传感器融合技术的实现方式及性能比较。文章探讨了特征融合、Transformer交互融合和级联管道等主流融合策略,并通过流程图直观展示关键步骤。针对当前技术面临的挑战,提出了五个有前景的研究方向:小尺寸目标检测精度提升、基于雷达的3D检测实现、灵活的多传感器融合框架设计、极端条件下的鲁棒性增强以及不确定性建模与利用。最后总结了开放问题与对应解决方案,展望了未来研究路径,为推动自动驾驶感知系统的可靠性与适应性提供了系统性参考。

linux的博客 140

最新综述!面向自动驾驶的3D目标检测

自动驾驶汽车的视觉感知系统在很大程度上依赖于3D目标检测。3D数据是在另一个层面上理解世界的关键,但不幸的是,这并不容易获得。第三个维度可以以更人性化的方式理解世界,或者更好的3D数据不是通过其RGB值来描述的,而是通过它在空间中的位置(x、y、z坐标)来描述的。原点(0,0,0)设置为捕获数据的目标。因此,其他一切,比如人,都是相对于原点来描述的。现代自动驾驶汽车通常配备多个传感器,如激光雷达和摄像头。激光雷达点云和RGB图像的融合应该能够为自动驾驶汽车实现更高的性能和安全性。

计算机视觉工坊 1168

北京途游游戏后端开发面经

北京途游游戏后端开发面经 我面试岗位是基于Python的后端开发工程师,主要是搞游戏的服务器开发。面试一共分了两轮,之后说是看看其他的候选人再定,感觉凉凉~~ 由于受到此次新型冠状病毒疫情的影响,本次面试采用视频面试的方式,下面是面试的时候面试官提的问题,python的基础知识还是问的比较多的。  一面:(32分钟微信视频)  简单做下自我介绍,   1.说一下你开发过的项目,挑一个说下你都做了...

weixin_45603043的博客 2126

手把手实战:RK3588上YOLOv8模型从训练到部署全流程解析

本文详细解析了在RK3588开发板上部署YOLOv8目标检测模型的全流程。从模型训练、正确导出适配的ONNX格式,到使用RKNN-Toolkit2进行模型转换与量化,最后在板卡上完成部署与性能测试。文章提供了完整的代码示例和关键避坑指南,帮助开发者高效实现嵌入式AI应用落地。

weixin_28224217的博客 407

告别手动改图!用Python+PyWin32驱动SolidWorks,实现参数自动化修改(保姆级避坑指南)

本文详细介绍了如何利用Python和PyWin32驱动SolidWorks实现参数自动化修改,提供从环境配置到API连接的工业级解决方案。通过实战案例和避坑指南,帮助工程师高效搭建自动化脚本工作流,显著提升设计效率。

weixin_30614109的博客 743

Oracle数据库的内存管理优化技巧

Oracle数据库作为企业级数据库管理系统,广泛应用于各种业务场景。内存管理是Oracle数据库性能优化的关键环节,合理的内存管理可以显著提高数据库的响应速度和吞吐量。本文的目的是深入探讨Oracle数据库内存管理的优化技巧,涵盖了系统全局区(SGA)和程序全局区(PGA)的管理、内存分配算法、内存参数调整等方面。通过详细的讲解和实际案例分析,帮助读者掌握优化Oracle数据库内存使用的方法,提高数据库的性能和稳定性。

2502_91592937的博客 996

泛微 OA - 根据流程 requestid 获取流程中的附件

在泛微 OA 流程中,附件是通过加密上传的,如果在第三方系统想要调用 OA 系统获取 OA 附件,暂时没有很好的方法实现。但是可以在本地进行调用,得到附件信息,拿到这些信息后,可以用过 url 地址在本地下载。

小松鼠的博客 5831

uniapp中renderjs实战:手把手教你实现SSE即时通讯(附完整代码)

本文通过一个完整的实战案例,详细讲解了如何在uni-app中使用RenderJS实现SSE即时通讯功能。文章剖析了RenderJS作为Vue视图层强力补充的原理,并提供了包含自动重连、状态管理等健壮性设计的完整代码,帮助开发者突破框架限制,高效集成浏览器原生API。

weixin_29005499的博客 190

计算机专业保研攻略(一):个人定位与院校推荐(必看干货)

写在最前 又是一年保研季,作为过来人,我深知保研就是一场信息战。在保研过程中,需要注意的信息太多了,最初我也因为经验不足,走了不少弯路。我写下这篇博客,希望能帮助更多有需要的同学。 怎样做好保研信息分析 我想举几个发生在我身边真实的例子: A同学推免排名不如B同学,但A保研去向比B同学好很多; C同学在年级里成绩并不算突出,但他拿到了最好的offer; D、E同学纷纷圆梦北大、浙大等名校,但是他们的成绩似乎并不突出; F同学取得了目标院校夏令营offer,但没有拿到本校推免资格; G同学认为自己拿不到推免

乔卿的博客 8390

目前固态激光雷达在机器人领域的应用难点汇总

固态激光雷达在机器人领域面临性能与成本的双重挑战:探测性能上,动态范围不足(60-80dB)导致高/低反射物体识别困难,近距盲区(30-50cm)与长距精度(±3cm)矛盾突出;结构上视场角与点云密度难以平衡,多雷达拼接又带来同步误差。成本方面,核心元件(SPAD/OPA芯片)良率低(<50%)、校准工序复杂,单机成本超200美元。环境适应性上,粉尘附着、振动偏移(±2°)和光衰(1万小时衰减15%)制约可靠性。

start_up_go的博客 482

OV9734 DATASHEET,完整规格书

OV9734完整规格书,包括电气参数,尺寸规格,寄存器配置表等

最新的sdio 4.0 spec 协议标准 带书签 高清完整PDF版

Part-E1-SDIO-Specification-Ver4.00-Final-120220.pdf:最新的sdio 4.0 spec 协议标准 带书签 高清完整PDF版,包括SDIO 接口的外设,SDIO 接口官方协议等。

LinePhone3.2.7(android端最新版本) sip客户端

SIP客户端For android:LinePhone3.2.7(最新版本),官网地址:http://www.linphone.org/

STM32F407中文手册

STM32f407中文手册 本参考手册面向应用开发人员,提供有关使用 STM32F405xx/07xx、STM32F415xx/17xx、 STM32F42xxx 和 STM32F43xxx 微控制器存储器与外设的完整信息。STM32F405xx/07xx、STM32F415xx/17xx、STM32F42xxx 和 STM32F43xxx 构成一个微 控制器系列,各产品具有不同的存储器大小、封装和外设。有关订购信息以及器件的机械与电气特性,请参见数据手册。有关 ARM Cortex™-M4F 内核的信息,请参见《Cortex™-M4F 技术参考手册》。

上一篇: 22、应用开发环境配置:语言选择与实践指南
下一篇: 53、普适计算中的隐私、安全与信任
mac99
博客等级 码龄17年 116粉丝 1444原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符  | 博主筛选后可见
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值