从感知能力提升到轻量化落地,具身这条路还要走很长一段时间~

技术驱动与应用牵引的双重作用下,2025年具身智能产业呈现爆发式的增长,这些趋势不仅塑造着行业的技术路线,也深刻影响着商业化落地的路径与节奏。这里也为大家盘一下这两年具身重点关注的技术领域。

感知能力升级与多模态融合是具身技术路线发展的重要一环,在视觉感知之外,触觉感知则是这两年发力的重点,特别是灵巧手领域,力控能大幅提升操作的精细度及结果反馈能力。多模态传感器融合技术使机器人能够同时处理视觉、听觉、触觉等多种信息,这种融合不仅体现在硬件层面,更在于算法层面的深度整合。大幅提升了环境感知的准确性和全面性。

大模型驱动的大脑算法正在不断地提升机器人对世界的经验认知与理解。特别是在人形机器人领域,大模型基于多模态数据提升机器人的感知能力,推动机器人的自主学习、决策规划能力,并结合动作训练、行为交互训练,有望提升动作的泛化能力。同时,轻量化的模型设计也成为行业落地的迫切需求,我们更需要低算力、多模态、跨平台的轻量化模型作为支撑!

同时,仿真环境与数据生态建设也极为重要!仿真环境与世界模型的持续完善为具身智能提供了高效的训练平台。基于对物理世界的规律认知经验,利用仿真平台进行物体运动、形变,环境的光电气热变化,操作工具使用等现象、状态和过程进行模拟仿真和建模分析,从而构建机器人对物理世界和运动操作的认知和理解。sim2real、sim2real2sim正在不断推动仿真与现实世界环境的对齐。如何快速应用大规模仿真数据到真实场景,是许多研究人员正在突破的难点......

本体的多样化催促各类数据的共用,包括双足、轮式、轮足复合等形态的数据如何从不同关节、执行器抽象出共同特征至关重要!

以上是我们在具身智能之心知识星球中的分享,更多干货欢迎扫码加入,和近200家具身公司、研究机构成员一起交流!

星球内部整理了许多为小白入门的技术栈和路线。

已经从事相关研究的同学,我们也给大家提供了很多有价值的产业体系和项目方案。

还有源源不断的求职、岗位分享哦,欢迎和我们一起打造完整的具身生态。

国内首个具身智能全栈技术社区:具身智能之心知识星球

社区创建的出发点是给大家提供一个具身相关的技术交流平台,交流学术和工程上的问题。星球内部的成员来自国内外知名高校实验室、具身相关机器人头部公司,其中高校和科研机构包括但不限于:斯坦福大学、加州大学、清华大学、西湖大学、上海交大、上海人工智能实验室、港科大、港大、南洋理工、新加坡国立、ETH、南京大学等;公司包括但不限于:智元机器人、有鹿机器人、云深处、优必选、傅里叶机器人、开普勒机器人、小米、星海图、银河通用、星尘智能、逐际动力等。

我们为大家汇总了近40+开源项目、近60+具身智能相关数据集、行业主流具身仿真平台、以及各类技术学习路线,包括但不限于:

具身智能感知学习路线

具身智能交互学习路线

强化学习全栈学习路线视觉语言导航学习路线
视觉语言动作学习路线多模态大模型学理解
多模态大模型学生成Diffusion Policy学习路线
多传感器融合标定机械臂抓取位姿估计
机械臂的策略学习大模型与机器人路线
双足与四足机器人具身智能与大模型部署
触觉感知学习路线机器人导航学习路线

机器人规划控制

......

这里能够让小白快速入门,让已经入门的同学进一步提升,已经提升的同学结交更多的朋友。

日常分享和讨论的问题

  • 机器人仿真和数据采集有哪些平台?

  • 人形机器人怎么做模仿学习?

  • VLM在机器人抓取与规划任务中是怎么用的?

  • 分层决策一般是怎么做的?和端到端比优势劣势有哪些?

  • 具身机器人的研报有哪些?30家汇总

  • 多家头部具身机器人公司岗位分享招聘

  • 具身智能,如何选择研究方向?哪个方向容易出成果?

  • ......

加入星球有哪些福利?

  • 第一时间掌握具身智能相关的学术进展、工业落地应用;

  • 和行业大佬一起交流工作与求职相关的问题;

  • 优良的学习交流环境,能结识更多同行业的伙伴;

  • 星球内部专属学习视频,搭配文档不枯燥;

  • 具身智能相关工作岗位推荐,第一时间对接企业;

  • 行业机会挖掘,投资与项目对接

星球内容一览

0)国内外具身智能高校汇总

星球内部为大家汇总了具身智能多个研究方向的国内外知名实验室,供大家后期读研、申博、博后参考。

1)国内外具身智能公司汇总

星球内部为大家汇总了各类国内外各类具身相关机器人公司,涉及教育、宠物、工业、救援、物流、交互、医疗等方向。

2)具身智能研报汇总

星球内部为大家汇总了大模型、人形机器人等行业相关的研报,第一时间了解行业的发展与工业的落地情况。

3)机器人相关书籍汇总

星球内部汇总了机器人导航、概率机器人、机器人动力学与运动学、路径规划、机器人视觉控制等多个方向的PDF书籍,供大家做基础学习。

4)具身智能零部件品牌汇总

我们内部为大家汇总了机器人行业知名的零部件制造厂商,涉及芯片、激光雷达、相机、IMU、底盘等。

5)开源项目汇总

星球内部针对机器人仿真项目、机器人抓取、机器人控制、具身交互、具身感知等多个领域的开源项目进行了汇总,助力快速上手。

6)ToF与3D相机

为大家汇总了国内外知名ToF厂家、相关产品、技术手册、综述等内容。

7)具身智能数据集

针对具身感知、触觉感知、导航、问答、大模型、视觉语言模型、端到端、机械臂抓取、控制规划多个领域的开源数据集进行了汇总,再也不用担心找不到可用的数据集了。

8)具身智能仿真平台汇总

星球内部针对通用机器人仿真平台和真实场景仿真平台进行了汇总,机器人仿真这里全都有!

9)强化学习路线汇总

我们为大家汇总了基于LLM的强化学习、可解释强化学习、深度强化学习主流方案,一览各个子领域的应用训练。

10)具身智能感知学习路线

内部针对主动视觉感知、3D视觉感知定位、视觉语言导航、触觉感知等多个任务进行了汇总,具身感知路线,一网打尽。

11)具身智能交互

星球内部为大家汇总了具身智能与环境交互相关工作,涉及抓取、检测、视觉语言模型、具身问答、gaussian splatting等多块内容。

12)视觉语言导航

针对视觉语言导航、规划等多个应用内容,星球内部进行了详细的汇总,关注自动驾驶与机器人应用。

13)触觉感知

我们汇总了触觉感知最新综述、传感器应用、多模态算法集成、数据集等多项内容,让大家对这一前沿应用有着深刻了解。

14)多模态大模型理解

星球内部汇总了大量多模态大模型理解相关内容,  包括但不限于Image+Text到Text、 Video+Text到Text、 Audio+Text到Text、 3D+Text到Text、Many到Text等。

15)多模态大模型生成

除了多模态大模型理解,星球内部也汇总了大量多模态大模型生成相关内容,包括Image+Text到Image+Text、Video+Text到Video+Text、 Audio/Speech+Text到Audio/Speech+Text、Many到Image+Text、Many到Many等。

16)大模型微调与量化推理

17)视觉-语言-动作

内部为大家汇总了主流的VLA模型相关内容,一览最新视觉-语言-动作相关进展。

18)Diffusion Policy

针对扩散模型设计、Diffusion Policy具体任务应用、Diffusion Generation等进行了汇总;

19)机器人导航与规划

20)大模型部署相关

针对大模型部署框架、大模型轻量化方法等进行了汇总,助力落地。

21)机械臂抓取

针对机械臂抓取、任务数据表示、位姿估计、策略学习多个部分展开了汇总。

22)双足与四足机器人

星球内部对开源的双足与四足机器人项目、仿真、源码、硬件等部分进行了详细的汇总,助力从零搭建你的机器人。

23)四足/轮式+机械臂

针对常用的移动+执行硬件方案进行了汇总,助力大家快速搭建属于自己的系统。

星球内部直播分享

星球内部不定期邀请行业大佬直播分享,直播内容可以反复观看,部分直播内容一览!

星球内部交流

星球成员可以在星球内部自由提问,无论是工作选择还是研究方向选择,都能得到解答~

扫码加入

新人加入大额优惠券来啦!欢迎加入具身智能之心知识星球,平均每天不到5毛钱,国内首个具身智能交流社区,这里将承担未来5-10年的技术输出与行业关注。

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值