AI消息速览

rMuscle——面向视觉-语言-动作模型推理的机器人肌肉记忆

事件日期 2026-09-16 · 学术前沿 · 已接受

事件日期2026-09-16
信息日期2026-09-16
入库日期2026-09-17
通道学术前沿
状态已接受
来源arXiv 论文

知识卡片:rMuscle——面向视觉-语言-动作模型推理的机器人肌肉记忆

一句话结论

rMuscle 是一个受人类肌肉记忆启发的实时 VLA 推理框架,通过复用机器人重复执行中的上下文与动作内部状态,在 RTX 4090 和 Jetson Thor 上取得 1.29–1.42X 加速,并在真实机器人上保持原成功率(更细粒度指标待核实)。

事件概述或研究问题

工厂重复性手工工作是具身 AI 的早期场景;VLA 模型已成为这类机器人的主流策略范式。VLA 推理延迟直接影响机器人响应速度和运动平滑度。现有 VLA 推理框架未充分利用具身工作负载特征,也未充分处理 VLA 推理不同阶段的瓶颈。论文首先刻画具身工作负载,发现机器人重复执行之间存在显著任务相似性,且相似性超出观测和动作轨迹,延伸到内部模型状态。

方法/产品要点

  • 提出 rMuscle,一个受人类肌肉记忆启发的实时 VLA 推理框架。
  • 利用跨执行相似性,设计双阶段肌肉记忆缓存:
    • Context Cache:复用视觉 token 输出(visual-token outputs),减少计算。
    • Action Cache:复用神经元激活模式(neuron activation patterns),减少权重访问。
  • 通过在线缓存重计算(online cache recomputation)、滑动窗口缓存检索(sliding-window cache retrieval)和连续去噪步骤间的掩码共享(mask sharing across consecutive denoising steps),降低缓存内存占用与访问开销。
  • 具体缓存结构、命中率、实现细节与开源情况待核实。

主要结果或产业意义

  • 在 RTX 4090 和 Jetson Thor 上,跨 LIBERO、RoboTwin 和物理操作任务,实现 1.29–1.42X 加速。
  • 在真实机器人上保持原始成功率;具体任务数量、成功率数值、统计显著性待核实。
  • 产业意义:面向工厂重复任务,推理加速可改善机器人响应性和运动平滑度,并提升 VLA 在边缘/嵌入式平台上的实时部署可行性。

为什么重要

  • VLA 是当前机器人策略的重要范式,推理延迟直接关系到控制回路实时性和动作质量。
  • 该工作把优化重点放在具身工作负载的重复性上,并将可复用性从外部观测/动作扩展到内部模型状态,属于推理系统层面的优化思路。
  • 对工厂等结构化、重复性强的早期落地场景,这类缓存可能带来明确的效率收益;在非重复或高动态环境中的价值待核实。

与既有脉络的关系

  • 已有 FibVLA 卡片关注 VLA 推理效率与时序感知,路径是采样/递归推理;rMuscle 的增量在于利用跨执行任务相似性与内部模型状态缓存,设计 Context Cache 和 Action Cache 来减少计算和权重访问。
  • 与 WCM、CamVLA 等卡片关注的强化学习后训练、相机视角鲁棒性不同,rMuscle 聚焦实时 VLA 推理加速。三者之间是否有直接对比或继承关系,来源材料未说明,待核实。

局限与不确定性

  • 仅基于来源摘要信息;论文正文、实验设置、基线、消融、缓存命中率、内存/功耗开销等未提供,待核实。
  • 缓存收益可能依赖重复执行和结构化工作站;在开放环境、多任务切换或动态场景下的泛化性待核实。
  • “保持原始成功率”的具体定义、任务范围、真实机器人平台和统计结果待核实。
  • 官方英文关键词未在来源中给出;本文所列英文关键词为摘要术语整理,非官方列表。
  • 是否经过同行评审、代码/模型是否开放、作者单位等,待核实。

可用于图书/PPT/简报的角度

  • “机器人肌肉记忆”:用人类肌肉记忆类比解释 VLA 推理缓存。
  • 工厂重复劳动自动化:为何结构化重复任务可能是具身 AI 早期经济场景。
  • VLA 推理瓶颈拆解:计算瓶颈 vs 权重访问瓶颈,以及 Context Cache / Action Cache 的双阶段应对。
  • 边缘部署:RTX 4090 与 Jetson Thor 上的加速对机器人实时性的意义。
  • 从观测/动作相似性到内部状态相似性:具身工作负载优化的新切入点。
  • 与 FibVLA 等推理效率路线对比:采样/递归 vs 跨执行缓存。

原始材料

  • 英文标题:rMuscle: Robotic Muscle Memory for Efficient Vision-Language-Action Model Inference
  • 英文关键词(来源未提供官方关键词列表;据摘要术语整理):Vision-Language-Action (VLA), Robotic Muscle Memory, Efficient Inference, Context Cache, Action Cache, Embodied Workloads
  • arXiv ID:2609.19104v1
  • Authors:Kaijun Zhou, Zhiyang Li, Le Chen, Jinyu Gu
  • Published/Updated:2026-09-16T17:34:43Z
  • Primary category:cs.RO
  • Categories:cs.RO, cs.AI
  • Abstract URL:https://arxiv.org/abs/2609.19104v1
  • PDF URL:https://arxiv.org/pdf/2609.19104v1
  • 来源材料:上述 arXiv 摘要页/PDF 链接;摘要之外的细节待核实。

发现内容有误?

免登录提交,管理员审核并完成修正后才会公开修订说明。

值得关注

VLA 是当前机器人策略的重要范式,推理延迟直接关系到控制回路实时性和动作质量。 该工作把优化重点放在具身工作负载的重复性上,并将可复用性从外部观测/动作扩展到内部模型状态,属于推理系统层面的优化思路。 对工厂等结构化、重复性强的早期落地场景,这类缓存可能带来明确的效率收益;在非重复或高动态环境中的价值待核实。

相关主题

对应的教材知识点

教材知识点匹配尚未完成。