公司
Tesla
Autopilot和FSD(全自动驾驶)
- 2019年,发布“影子模式”,通过模拟决策判断与驾驶员的行为有何异同,相同行为不做处理,不同行为进行数据回传处理;
- 2020年,自研数据自动标注。
各种信息打包上传到服务器上,经预测性标注,反馈到传感器,若一致,则标注成功; - 2020年,引入BEV+Transformer架构,后引入时序信息;
- 2021年,引入HydraNet神经网络架构;
- 2022年,引入占用网络Occupancy Network。
补充了I、物体高度识别;II、未经标注的障碍物识别;
实现端到端架构。2024年,TeslaFSDv12开始推送。基于深度神经网络,将摄像头采集信息作为输入,直接预测智能车方向盘转角。马斯克展示V12时讲,V12消除了30万行C++代码,是纯粹的神经网络,实现了输入光子、输出执行命令的完全端到端执行
Wayve
多模态大模型生成数据赋能端到端。引入了多模态大模型GAIA-1,生成世界模型。模型分为两个部分:世界模型和视频扩散解码器。世界模型是一个自回归的转换器,预测下一个图像标记。视频解码器以更高的时间分辨率将预测的图像标记映射回像素空间。
百度
2024年5月15日,百度