世界模型“上岸”路在何方?能否成为真正的机器人大脑?

技术视界 | 打造“有脑有身”的机器人:ABC大脑架构深度解析(下) 我们需要的,不只是更强的大模型,更是更紧密的协作网络。本篇将深入剖析控制大脑(C)的核心职能与实现路径,介绍如逆运动学、模型预测控制、动态阻抗控制等关键技术,解析真实落地项目中的工程方案,并探讨以C大脑为代表的控制模块,如何正在与上层大模型进一步融合,迈向端到端的一体化智能架构。同时,我们也将展望其未来可能的演化方向——从模块化向紧耦合、从指令驱动到语义内生、从“ABC串联”向“AB融合C”或“端到端一体化”的新范式转变,探讨ABC大脑如何成为支撑通用型具身智能体的关键基础架构。因为这种模块化架构不仅。 阅读详情

世界模型成行业关键词

过去几个月,“世界模型”(World Model)从学术黑话迅速膨胀成AI和机器人行业里的关键词。行业目光转向背后是切实的焦虑。

世界模型的背景与意义

一方面,经过过去两年野蛮生长,具身智能暴露了当前AI在物理世界中的短板,世界模型试图补上这个短板,让机器人学会物理世界的规律、因果。世界模型与具身智能的关系,本质上是“大脑”与“身体”的关系。另一方面,大模型在经历多种探索之后,需要从虚拟走向真实世界的下一阶段。只是,当资本、技术专家、产业资源都倾注于此,世界模型到底如何上岸,人们没有答案。

世界模型的四条分岔路

在智源研究院院长王仲远看来,眼下全球围绕世界模型的探索,正被撕扯成四条截然不同的分岔路:第一类是以语言为中心的世界模型,包括VLM、VLA,模型在文本空间中预测下一个词,学到的是语言描述的世界,并不能理解背后的物理后果;第二类是以像素为中心的世界模型,像Sora和Seedance等视频生成类模型,在视觉空间中学习视频或图像,学到的是像素描述的世界;第三类是以三维结构为中心的世界模型,包括3D重建以及李飞飞团队的World Labs Marble模型,不过模型重建3D空间不等于理解世界,几何结构也不代表物理状态;第四类是以视觉表征为中心的世界模型,比如杨立昆的JEPA系列模型,预测的是视觉表征的压缩,但视觉嵌入演化不等于物理规律演化。

智源研究院的探索

作为一家非营利性科研机构,北京智源人工智能研究院是目前国内世界模型领域的中坚力量。智源研究院目前尝试的是第五个分类——以语言和视觉为中心,融合进统一的「潜空间表征」:所有模态被压缩进同一个潜空间(latent space)中,再由不同的“解码器”(Decoder),按需还原成不同输出形态。在迈向世界模型的前几年,智源研究院在AI上的动作,就像是一部层层递进的“连续剧”,一步步构建从数字世界走向物理世界的通用基座。从早年的“悟道”大模型,到逐渐把竞争点引导向原生多模态统一架构,此后,智源研究院明确提出要向“下一状态预测(NSP)”跃迁,并将这套逻辑接入悟·Physis和悟界·RoboBrain Orca的可部署系统中。在这段期间,智谱AI、月之暗面、面壁智能、银河通用等多家行业头部企业的核心创始人唐杰、杨植麟、刘知远、王鹤等,也都均在智源开展过相关领域研究。

王仲远对世界模型的看法

王仲远对世界模型热潮保持着冷静。他认为,世界模型大概处在深度学习的2012年前后。在他看来,世界模型接下来的硬仗,在于几个维度的综合比拼。首先,模型要具备长时序一致性;其次,要进行因果逻辑推断;最后,要作为基座模型应用到多种场景。落到应用侧,世界模型的价值会在两大大方向兑现,除了用于突破具身智能的卡点,服务于机器人领域之外,还可广泛应用于严肃工业、物理仿真、科学研究等真实物理场景。他表示,期待未来世界模型能成为真正的机器人大脑,但这会是一个长期过程,可能需要三年甚至更长时间。

采访实录

近期,王仲远与硬氪等媒体聊了聊对世界模型的看法、以及世界模型与具身智能的衔接点,以下是采访实录(略经摘编):
硬氪:为什么今年智源大会重点谈“世界模型”,它和过去的大模型路线是什么关系?
王仲远:我们不是突然提出世界模型这个概念。早在2024年智源大会上,我们就对人工智能的发展路径做过预判。今年智源大会有两大主题,一个是世界模型,一个是智能体。世界模型是人工智能从数字世界进入物理世界时必须面对的下一代基座模型问题。
硬氪:当前世界模型有哪几条技术路线?
王仲远:现在主流的有四条路:以语言为中心路线(如Gemini3);以像素为中心路线(如Sora);以三维结构为中心路线(如李飞飞World Labs的Marble);以视觉表征为中心路线(如LeCun的V - JEPA系列)。
硬氪:智源的世界模型可以归类于什么路线里?
王仲远:我们更倾向于在潜空间中学习世界知识,尝试把世界知识真正压缩到隐空间中,再通过不同Decoder输出Language、Action和Vision。智源选择尝试以语言为中心的分类和以视觉表征为中心的分类可能的融合,原因是世界模型不仅要“看懂”物理世界,更要“理解”并“决策”。
硬氪:现在很多公司把视频生成模型称为世界模型,你怎么看?
王仲远:我认为,视频生成不等于世界模型。世界模拟器用于描述视频生成还算相对准确,但视频生成模型本身并不等同于世界模型。真正的世界模型应该是面向真实物理世界的下一代基座模型。语言模型时代的核心是Next Token Prediction,而世界模型时代的核心应该是Next Physical State Prediction。语言模型可以用Prompt激发能力,世界模型则需要用State激发能力。语言模型更多是被动观察,世界模型必须主动交互。语言模型可以是单模态或多模态,世界模型必须走向全模态。
硬氪:一个真正面向物理世界的世界基座模型,需要具备什么能力?
王仲远:我认为至少需要几个能力。第一,要物理正确;第二,要有动作因果可溯;第三,要有长时间序列一致性;第四,要有通用泛化能力。

世界模型与具身智能的关系

硬氪:当前具身智能最大的问题是什么?
王仲远:我认为具身智能还处在非常早期。现在的具身模型多数还是单场景、被动任务执行者,很难泛化。世界模型和具身智能是相互呼应的,具身智能暴露了当前模型在物理世界中的短板,世界模型则试图补上这个短板。
硬氪:现在也有一些论调称,“VLA已死”,世界模型是不是具身智能的必要路线,两者的关系是什么?
王仲远:我的判断是:VLA是当下,世界模型是未来。VLA有局限,世界模型要解决的是更底层的问题。
硬氪:世界模型对机器人执行任务的帮助,能否举一个具体的例子?
王仲远:世界模型更重要的能力是基于当前Context和状态,预测未来可能发生的状态,并据此做出当下最优决策。比如机器人在酒店或家庭环境中,需要结合历史记忆和当前Context做出复杂推理后的物理决策。执行之后,还要继续采集反馈,评估任务是否完成,并进入下一轮状态预测和决策。
硬氪:世界模型最终是否会成为真正的机器人大脑?
王仲远:这是我们的期待。这件事不会短期完成,世界模型是一个长期过程,短期内,具身机器人会先在具体场景中落地,采集数据,形成闭环;长期看,世界模型有机会成为真正意义上的机器人大脑。

世界模型的技术难点与落地问题

硬氪:世界模型现在最难突破的技术难点是什么?
王仲远:一个核心难点是数据,尤其是真实物理世界的数据。现在真实世界数据仍然非常缺乏,而且是散落的孤岛,没有形成足够充足、可复用、可训练的数据体系。视频数据是目前最容易Scale Up的数据,但科研技术还没有充分挖掘视频数据里的物理信息。除了视频,还需要真实交互数据、异构感知数据等。
硬氪:如果真实物理世界数据不足,是否可以依靠仿真数据?
王仲远:仿真数据有必要,能弥补真实数据采集不足,但我对完全依赖仿真数据构建更强模型是有疑虑的。未来可能会把多种数据放在一起训练世界基座模型,但不同数据如何配比,现在还没有标准答案。
硬氪:如果世界模型还很早期,具身智能短期如何落地?
王仲远:短期内,具身智能会先解决具体场景问题,如工厂分拣、酒店服务等To B场景。这些场景能采集数据,反过来会帮助未来世界基座模型训练。所以技术要先行,产品和系统会跟上。

世界模型的发展阶段与竞争

硬氪:世界模型最可能率先落地在哪些场景?
王仲远:具身智能是最重要的应用场景之一,除此之外,世界模型也可用于物理仿真、科学实验、AI for Science等场景。
硬氪:如果类比大语言模型的发展阶段,世界模型现在处于什么阶段?
王仲远:我认为世界模型和具身智能大概处在2012年的时期。现在世界模型还没有到GPT时代,但随着视频数据进一步被挖掘,具身机器人不断在真实场景落地,世界模型会更快进入爆发阶段。
硬氪:大语言模型时代,中美通常被认为有六到十二个月差距。世界模型时代,中国和海外是否还有差距?
王仲远:我觉得世界模型没有差距,大家站在同一起跑线。
硬氪:未来世界模型的竞争会集中在哪些方面?
王仲远:未来真正关键的竞争点包括:能否具备真实物理可验证能力;能否具备长时序一致性;能否进行因果逻辑推断;能否作为基座模型应用到多种场景。世界模型最后一定需要通过系统和产品来证明。
硬氪:过去大模型积累的基础设施能否复用?世界模型对算力等等,有什么新的要求吗?
王仲远:我认为,现有的大模型算力基础设施、训练框架、数据工具链都可以在很大程度上复用。世界模型会带来新的需求,但基础设施并不是完全从零开始。世界模型到底能否突破重重挑战,成为真正的机器人大脑呢?这值得我们持续关注和思考。

3D-VLA 深度解析:赋予机器人三维“想象力”的生成式世界模型 它接收编码后的三维场景、人类的语言指令以及机器人的动作序列,利用其强大的上下文理解和推理能力,来建模这三者之间的复杂关系。在追求通用人工智能机器人的征途上,我们不仅希望机器人能“听懂”指令并“看见”世界,更渴望它们能真正地“理解”我们所处的三维物理空间,甚至能像人类一样“想象”出自己行为的后果。:模型从构建好的大型 3D-Language-Action 数据集中取出一个样本,包含三个部分:任务开始前的三维场景 S_t、描述该步骤操作的语言 L_t(如“拿起红苹果”),以及人类专家实际执行的动作 A_t。 阅读详情

相关推荐

人形机器人“大脑”机遇:具身智能大模型

冻结参数的大模型结合基础模型使用的大模型通常是在广泛的数据上预训练好的, 在利用大模型的强大能力的同时保留了对特定任务进行微调的灵活性,在需求级、任务级中使用较多。2024年,机器人成为科技竞争的新高地、未来产业的新赛道、经济发展的新引擎,全球机器人展现出强劲的增长势头和广阔的前景,各国按下发展“加速键”竞先布局具身智能创新时代,机器人产业已经位于井喷式爆发前夜,机构预计2024年全球机器人出货规模将达到约4700万台,未来五年将维持20%以上的复合增长率,头部企业有望脱颖而出斩获最大蛋糕。

具身机器人和通用AI 1372

世界模型是什么?世界模型和大模型有什么区别?它是怎么工作的?

世界模型类似于真正的人类大脑,通过学习现实世界中的物理和因果规律,具备“物理直觉”,可在内部模拟环境变化,基于当前环境状态推演未来状态,并评估自身行为的后果。这一概念源于心理学中的“心智模型”。

Javachichi的博客 4483

rv1126 读取sensor输入,输出到屏幕显示【RK_MPI API接口】

rv1126 libdrm VO

学习记录 1万+

OpenAI押注的「1X」训出专用世界模型,首证机器人Scaling Law

众所周知,家庭环境中遇到的日常物体或者饲养的宠物很难模拟,因此机器人使用的模拟环境往往在视觉上很单调,缺乏现实世界用例的多样性。世界模型解决了构建通用机器人时一个非常实际、但经常被忽视的挑战,即评估。1X 工程师 Daniel Ho 表示这是机器人世界模型的初步进展,模型可以理解接触到的物理世界并生成高保真视频,使机器人可以在自己的神经空间中执行规划、评估和模拟操作。该研究训练的世界模型能够根据不同的动作指令产生不同的结果,下面展示了在四种不同轨迹条件下的世界模型生成的效果,每种轨迹都从相同的初始帧开始。

2403_86950003的博客 2265

vscode远程开发-调试模式下attach远程进程提示管理员权限失败的问题

vscode 远程开发 附加进程

comhaqs的专栏 2881

VCSA 上的 vmware-vpxd 服务失败,Web端提示503 服务不可用 (503 Service Unavailable)

昨晚VCSA碰到一个很诡异的问题: 使用 vSphere Web Client 连接到 vCenter Server Appliance时失败,提示: 503 服务不可用 (503 Service Unavailable) 无法连接端点 (Failed to connect to endpoint):[N7Vmacore4Http20NamedPipeServiceSpecE:0x00007f975808ee30] _serverNamespace = / action = Allow _pipeNam

徐华的博客 2万+

机器人不再盲从,世界模型赋予TA“大脑”

2025年世界机器人大会上,北京人形机器人创新中心发布“具身世界模型体系”,让人形机器人能够理解物理规律并预测未来变化。这一突破使机器人从被动执行转变为能主动推理和决策的智能体。通过5000多小时视频数据训练,世界模型让机器人具备“物理直觉”,能在未知场景中泛化应用。凡拓数创提供数字孪生、多模态数据融合等技术支持,构建高精度仿真环境,加速世界模型训练与应用。这一技术将在智能制造、智慧物流、家庭服务等领域带来革命性变化。

Zlssszls的博客 449

解构LOL数值平衡:从基础公式到实战决策的深层逻辑

本文深入解析了《英雄联盟》数值平衡的底层逻辑,从基础攻击力公式到经济系统设计,揭示了MOBA游戏背后的精密数学架构。通过实战案例展示护甲减伤、技能伤害建模等核心机制,探讨装备定价与战斗节奏的数值关联,帮助玩家理解版本更新中的平衡艺术。

weixin_42540248的博客 348

DreamZero技术解析:当世界模型成为机器人“物理大脑”

VLA模型能理解复杂的语义指令,却在执行未见过的物理动作时彻底失灵——因为它们学的是静态图文,从未见过世界如何动态演化。DreamZero给出了截然不同的答案:不直接映射动作,而是先预测未来视频,再反推该做什么。这种世界动作模型(WAM)让140亿参数的视频扩散模型获得了真正的物理直觉。在真实机器人实验中,零样本泛化能力超越顶级VLA两倍以上;仅需10–20分钟的人类或异形机器人视频,就能在未见任务上获得超42%的相对提升;更惊人的是,30分钟的“玩耍数据”即可让模型适应全新机器人本体,同时保留零样本能力。

编程爱好者 1476

Transformer凭什么取代RNN?深入拆解自注意力机制与梯度消失问题的终极对决

本文深入探讨了Transformer如何通过自注意力机制解决RNN的梯度消失问题,成为自然语言处理领域的新标准。通过对比RNN和Transformer的架构差异,揭示了自注意力机制在并行计算、长期依赖处理等方面的技术优势,并提供了实际任务中的性能对比数据。

f6g7h8i9j的博客 191

第一章、isaacsim 及 isaaclab 安装教程

本专栏所有内容将根据上述资源地址展开,请结合食用~

m0_47719040的博客 4783

人形机器人“大脑”的定义和功能人形机器人“大脑”的定义和功能如下:定义:人形机器人的“大脑”是其核心控制系统,负责感知、决策、学习和控制等功能。它通常由高性能计算平台和人工智能算法组成,能够处

综上所述,人形机器人“小脑”通过结合多种控制技术和算法,实现了运动控制的精确性和协调性、实时处理与高精度控制、学习与适应能力以及多模态感知与决策,推动了人形机器人技术的快速发展和广泛应用[2][1][78]。综上,人形机器人的“大脑”是其智能化的核心,通过感知、决策、学习和控制等功能,赋予机器人高度的自主性和交互能力[1][2][6]。人形机器人的“大脑”使其能够在工业、商业和服务领域完成复杂任务,如自主学习、任务规划、人机交互等[4][24]。等多方面的能力[2][33][35]。

AI生成曾小健3 1105

微信小程序|基于小程序+云开发制作一个租房小程序

经济发展的同时伴随着大批人群的流动,租房需求一直是持久不衰的话题,如何租好房,好租房,跟随此文一起制作一个租房小程序,让租房不再困难。

商务合作 / 项目定制 / 学习交流。个人vx:lovely_wml 4931

机器人“大脑+小脑”范式:算力魔方赋能智能自主导航

这种强大的算力支持使得机器人能够在复杂环境中快速做出决策,优化路径规划,从而实现高效、安全的自主导航。未来,机器人“大脑”将具备更强的感知能力、更高效的决策能力和更自然的人机交互能力。作为“大脑”的核心硬件,凭借其强大的算力和高效的任务处理能力,为机器人智能化提供了坚实基础。的硬件性能也将不断提升,支持更复杂的任务和更高效的计算。这种分工明确的架构不仅提高了机器人的自主性和适应性,还为机器人在复杂环境中的应用提供了更多可能。在机器人技术的发展中,“大脑+小脑”的架构模式逐渐成为推动机器人智能化的关键。

2401_83179994的博客 1055

【二 Deepseek+Coze案例】【 2.2 Coze + Deepseek 实现小红书爆款笔记:打造专属Agent智能体】

摘要 本文介绍了如何利用Coze平台和Deepseek模型构建自动化Agent智能体,用于生成和优化小红书爆款笔记。文章首先分析了爆款笔记的核心特征,包括精准定位、吸引标题、实用内容、精美排版和热门标签。随后提出Agent智能体的功能需求,涵盖热点追踪、内容生成与优化、数据分析及自动发布等模块。在技术实现上,详细阐述了从环境配置、数据采集到内容生成与优化的全流程,并提供了Python代码示例,展示如何调用Coze函数获取热点数据及竞品笔记。该方案通过智能化的内容创作与运营策略,帮助用户高效打造高曝光的小红书

商务合作|问题讨论|交流学习 请联系作者微信,加微信请务必注明来意,博客主页有联系方式 2305

OV9734 DATASHEET,完整规格书

OV9734完整规格书,包括电气参数,尺寸规格,寄存器配置表等

世界模型——真正能“颠覆世界”的AI革命

世界模型是指一个智能系统(无论是生物大脑还是人工系统)为了理解和预测其环境而构建的内部表示或认知框架。简单来说,它是系统对"世界如何运作"的理解和假设的集合。在人类认知中,世界模型相当于我们大脑中对物理规律、社会规范、因果关系等概念的内部表征。而在人工智能中,世界模型则是算法对环境动态、实体关系和行为后果的数学表达。世界模型:旨在模拟现实世界的物理规律、因果关系和动态变化,构建对环境的内部表征,使AI能够像人类一样通过“想象”预演行动后果,实现反事实推理(即回答“如果采取不同行动会如何”的问题)。

Mamba的博客 2011

efm32 入门.pdf

本PDF共计22页,介绍的是操作驱动API,下载与否自己斟酌。

世界模型揭秘:和大模型啥区别?它是怎么运作的?

世界模型成为AI领域新风口,李飞飞团队WorldLabs融资2.3亿美元。世界模型模仿人类大脑,通过物理规律建模和内部模拟实现智能决策,不同于依赖数据统计的大模型。其核心模块包括感知编码、动态推演和控制决策,应用场景涵盖自动驾驶、机器人控制和科研仿真。当前大模型相关人才缺口达47万,掌握AI技能可提升薪资竞争力。学习路径分四个阶段:初阶应用、高阶开发、模型训练和商业落地,90天可完成转型。

2401_84494441的博客 1923

IDEA的使用指南

IDEA基于java的使用手册,可以最快速的上手,在使用中不断的丰富自己的使用技巧.

jre9下载 jdk9

(Java SE Runtime Environment 9.0) 9.0u175 官方最新版 【x86|x64】

大模型与Agent:AI世界的“大脑”与“行动派”

你知道AI背后的两大“明星”是谁吗?没错,它们就是23年火到现在的大模型和Agent!那么他们有什么区别,又有何关联,为何持续霸占大家的视野,今天我们就来聊聊这两个“大咖”是怎么携手合作,让AI变得更聪明的。

企业级智能体,全行业解决方案,5000+企业签约,海量场景覆盖。 1887

大模型赋能人形机器人

以google的RT-2模型为例,是一种新型的视觉-语言-动作 (VLA) 模型,可以从网络和机器人数据中学习,并将这些知识转化为机器人控制的通用指令,同时保留Internet规模能力。对现有的视觉语言模型与机器人数据进行协同微调。不同于单模态大模型的单一类型数据处理,多模态大模型可以处理文本、图像、视频或音频等多种类型的数据,使得机器人具备各感官融合决策的能力,提升了机器人的推理决策功能。性相对目前的人工智能而言的,目前大模型是在相对抽象的代码世界里完成的,并没有和现实的传感器、执行器等紧密的结合。

m0_50836864的博客 1752

宇树科技开源 UnifoLM-WMA-0 世界模型,从硬件猛兽到“造脑者”

宇树科技(以强悍机器人硬件闻名)近日开源首个世界模型-动作架构 UnifoLM-WMA-0,标志战略重心重大演进。本文解析其技术与雄心:先通俗解读“世界模型”(机器人能“预演”物理交互的“大脑”);再拆解模型两大核心能力(仿真引擎“虚拟训练场”、策略增强“未来预测器”)及“决策+仿真”双模式架构;继而探讨“三步走”训练流程与全开源数据集的赋能作用;最后结合CEO观点,分析其此时开源的原因,及“硬件+大脑”生态战略对通用机器人与具身智能领域的深远影响。

攻城狮7号的博客 4881

【机器人系统】机器人的大脑:具身智能

人形机器人由大脑、小脑、肢体三部分组成。“大脑”主要基于AI 大模型,根据环境、任务和目标等信息,自主做出最优决策,以实现自主导航、任务执行、人机交互等功能。“小脑”基于人工智能、自动控制、机器人操作系统(ROS)等技术,实现复杂环境下的运动控制。“肢体”基于多种传感器,能够感知非结构化场景并根据不同情况做出反应,实现高动态、高精度的运动。机器人大模型和通用大模型有一定区别,难以直接共用。LLM 是“语言预测器”,不是机器人控制器。

weixin_53305284的博客 905

GWM:面向机器人操作的可扩展高斯世界模型

25年8月来自清华、BIGAI 和南洋理工的论文"GWM: Towards Scalable Gaussian World Models for Robotic Manipulation"。 由于现实世界交互效率低下,在已学习的世界模型中训练机器人策略正成为一种趋势。现有的基于图像世界模型和策略已取得一定成效,但缺乏鲁棒的几何信息,即使基于互联网规模的视频源进行预训练,也需要对三维世界有一致的空间和物理理解。为此,本文提出一种用于机器人操作的世界模型分支——高斯世界模型 (GWM),它通过推断机器人动作影

yorkhunter的博客 2334

具身智能进入第三年,蚂蚁灵波“具身原生”理念能否重塑机器人大脑?

而作为该架构的集大成者,压轴登场的LingBot - VA 2.0用一套完整的路径交出了答卷,语义分词器让视觉与动作在同一空间交融,因果预训练让模型从零理解物理世界,MoE架构将推理成本死死压在实时控制线以下,而Foresight Reasoning(前瞻推理)则让预测与执行并轨,不再互相等待。从头预训练、因果建模、MoE与异步推理,以及新一代VAE,看似对应四项不同的技术创新,本质上却指向同一个目标:让机器人摆脱对既有动作的简单复现,真正学会理解物理世界,并在不断变化的环境中自主完成任务。

IT界那些事儿 41
上一篇: 海洋具身智能公司「世航智能」获超10亿A轮融资,海洋机器人迈向规模化应用
下一篇: 2026 年人形机器人价格大跳水,工业与消费端路径分化,未来走向何方?
IT界那些事儿
博客等级 码龄6年 2万+粉丝 22原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值