AI消息速览

探索RSI,生数新世界模型让机器人开始自我进化

事件日期 2026-09-12 · 产业观察 · 已接受

事件日期2026-09-12
信息日期2026-09-12
入库日期2026-09-12
通道产业观察
状态已接受
来源量子位

知识卡片:探索RSI,生数新世界模型让机器人开始自我进化

一句话结论

生数科技 Motus2 把行动、预测和评估放进同一世界模型,通过 Best-of-N 规划与基于模型的强化学习(MBRL)形成“生成动作→预测后果→评估结果→更新策略”的闭环,初步探索 RSI;文章称真机任务中规划+MBRL 将基础策略平均成功率从65%提升至75%,触觉与记忆模块也分别带来增益。

事件概述或研究问题

机器人学习拧灯泡时,如果拧歪,谁告诉它问题在哪、下次如何改?文章认为人类无法替机器人示范所有情况,机器人需要自评价动作结果并从反馈继续学习。生数科技发布 Motus2,文章称其在前代 Motus 基础上拓展视觉、语言、动作与触觉等模态,同时具备行动、预测、评估三种能力。

文章称前代 Motus 于今年2月发布,当时世界动作模型概念尚不成熟;Motus 在50项通用任务测试中较 Pi-0.5 绝对成功率高出35%以上。由于文章日期为2026-09-12,“今年2月”可理解为2026年2月,具体以原文为准。Motus2 的研究问题是:世界模型能否利用自身预测和价值反馈持续改进策略,并向 L4“自主世界智能体”靠近。

方法/产品要点

  • 行动:WAM 生成动作,回答“接下来做什么”。
  • 预测:AC-WM 预测后果,回答“做完会发生什么”。
  • 评估:VM 评估结果,回答“结果好不好”。
  • 闭环:生成动作→预测后果→评估结果→更新策略;文章将其称为对递归自我改进(RSI)的初步探索。这里的“自进化”指利用模型自身预测和价值反馈持续改进策略,不意味着开放环境无限自主学习。
  • Action-first:从机器人领域中间训练阶段采用动作优先信息流,先根据当前观测生成动作,再预测结果,最后评估,以避免模型“偷看”未来视觉帧。
  • 推理阶段:Best-of-N 规划,先想多个候选动作,分别脑补执行后画面,由价值模型打分,挑最高分执行;执行一小段后重新观察真实世界,再进入下一轮。
  • 训练阶段:把候选动作打分转化为策略更新信号,分数高得到更强正向引导,分数低逐渐被放弃;称为基于模型的强化学习(MBRL)。该阶段只更新动作相关参数,预测和评估部分保持不动。
  • 触觉:新增轻量级触觉专家模块,在短动作片段执行前读取最新触觉反馈以细化动作;复用主模型中间结果,不重跑完整视频骨干。
  • 记忆:默认缓存近期真实观测;测试了保留完整历史与压缩历史信息两种方案。
  • 灵巧手平台:已部署在单手22自由度的 Sharpa Wave、单手20自由度的 WUJI Hand 2 等平台,展示拧灯泡、翻书、多指操作等任务。
  • Ego 数据体系:把人类第一视角操作经验作为主要数据来源,再迁移到机器人。训练三步:单目 Ego 视频预训练;引入双目视频和人类动作数据;机器人领域适配训练(机器人轨迹和人机对齐数据)。规模约13万小时人类第一视角数据,配上百小时级机器人及人机对齐数据。
  • 相关对照:文章提到英伟达 EgoScale 采用类似思路;Physical Intelligence 的 RECAP 让机器人先跟人学再自己练习,出错时可人类接管纠正。

主要结果或产业意义

  • 手机放置和多指操作两项真机任务:基础策略平均成功率65%;单独加入规划67.5%;单独加入 MBRL 72.5%;两者结合75%,比基础策略高10个百分点。
  • 抽取纸杯、撕纸两项真机任务:加入触觉后,平均成功率从60%提升至72.5%,提升12.5个百分点。
  • 寻找隐藏方块、根据历史提示操作按钮两项测试:保留完整历史信息的方案平均成功率57.5%,明显高于压缩历史信息方案。文章称这不能说明“记忆压缩行不通”,保存完整观测更像阶段性妥协。
  • 同样目标任务微调流程下:只经过人类 Ego 数据预训练的模型,五项真机任务平均成功率51%;加入机器人领域中间训练后,成功率跳到84%,提升33个百分点。
  • 数据规模对比:双目数据从2000小时加到20000小时,模型在人类动作预测任务上的验证误差持续下降,文章称未看到明显天花板。
  • 世界模型分级:文章引李飞飞团队三分类(输出像素的渲染器、输出几何与物理状态的模拟器、输出动作的规划器);生数科技把通用世界模型演进路线分为 L1 生成世界、L2 与世界交互、L3 在世界中行动、L4 自主世界智能体、L5 世界组织者。文章称 Motus2 已具备 L3 核心能力,并触碰 L4 中自主决策、自主反馈、持续自我改进的部分。

为什么重要

  • 与已有相关卡片(NIST AI RMF 剧本、Epoch AI 出版物页面、OpenRouter 博客归档)无直接事实重叠;若放在同一 AI 产业脉络中,本条增量是具身智能/世界模型的闭环自进化,而非治理框架、研究趋势汇总或 LLM 网关产品。
  • 机器人策略学习从“看到 A 做 B”的统计关联,转向“预测后果—评价结果—更新策略”的反馈闭环。
  • 失败数据在闭环中有了不同于成功示范的用途:成功轨迹提供正向解法,失败轨迹用于学习动作后果与结果评价。这可能改变具身领域对数据价值的定义。
  • RSI 此前更多在软件模型/通用 AI 讨论中出现;Motus2 把预测、评估和策略更新放进世界模型,是 RSI 在机器人场景的初步探索。文章同时强调,这与开放世界无限自主学习仍有距离。
  • 产业层面,Motus2 展示了触觉、记忆、Ego 数据和高自由度灵巧手在同一个世界模型中的组合,可能影响灵巧操作、数据采集与训练范式。

局限与不确定性

  • 文章明确:这里的“自进化”是利用模型自身预测和价值反馈持续改进策略,不意味着机器人已经能在开放环境里无限自主学习。
  • 触觉数据在不同机器人本体之间的迁移还很困难;更长任务的预测可靠性、长期记忆效率、开放世界持续学习仍需探索。
  • 记忆方案中,保留完整历史与压缩历史的取舍尚未解决;完整观测方案被文章描述为阶段性妥协。
  • 文章未提供论文同行评审状态、第三方复现、完整基准细节和统计显著性,待核实。
  • Motus2 的具体发布日期、模型规模、训练成本、开源/商用状态,材料未说明,待核实。
  • 生数科技 L1-L5 分级与李飞飞团队三分类之间的关系,以及 Motus2 是否被外部认定完全达到 L3,待核实。

可用于图书/PPT/简报的角度

  • 从“能行动”到“会反思”:世界模型如何把预测与评价接入策略闭环。
  • RSI 在具身智能中的落地样例:Best-of-N 规划 + MBRL 策略更新。
  • 失败数据也是资产:MBRL 如何改变机器人数据筛选逻辑。
  • 灵巧手数据策略:Ego 数据预训练 + 机器人中间训练 + 人机对齐。
  • 视觉之外的信息补丁:触觉专家模块与记忆机制。
  • 世界模型路线图:L1-L5 与“自主世界智能体”的产业叙事。
  • 竞争参照:Motus2、Physical Intelligence RECAP、英伟达 EgoScale、李飞飞团队世界模型分类。

原始材料

  • 中文标题:探索RSI,生数新世界模型让机器人开始自我进化
  • 英文标题:待核实(材料未提供)
  • 英文关键词:RSI, WAM, AC-WM, VM, Best-of-N, MBRL, Ego data, Action-first, Motus2, Motus, Pi-0.5, EgoScale, Sharpa Wave, WUJI Hand 2, Dreamer, RECAP
  • 作者:衡宇
  • 来源:量子位
  • 日期:2026-09-12 16:15:31
  • URL:https://www.qbitai.com/2026/09/487752.html
  • 项目主页与真机演示:https://motus-robotics.github.io/motus2/
  • 论文链接:https://arxiv.org/abs/2608.30237
  • 备注:材料未提供英文标题;论文同行评审状态、第三方复现与更多实验细节待核实。

发现内容有误?

免登录提交,管理员审核并完成修正后才会公开修订说明。

值得关注

与已有相关卡片(NIST AI RMF 剧本、Epoch AI 出版物页面、OpenRouter 博客归档)无直接事实重叠;若放在同一 AI 产业脉络中,本条增量是具身智能/世界模型的闭环自进化,而非治理框架、研究趋势汇总或 LLM 网关产品。 机器人策略学习从“看到 A 做 B”的统计关联,转向“预测后果—评价结果—更新策略”的反馈闭环。 失败数据在闭环…

相关主题

对应的教材知识点

教材知识点匹配尚未完成。