当天的机器人工作把 Vision-Language-Action(VLA)模型当作可部署的控制系统。ECHO 扩展了长时程记忆,KeyStone 改进了推理时的随机动作选择,ATAAT 则表明视觉后门可以在微调后保留下来。共同的检验标准是:机器人策略在更长任务、新数据、不确定样本和已发布模型风险下,能否保住有用行为。

VLA 记忆与技能保留

ECHO 和 ConSFT 关注一个基础部署问题:机器人策略必须记住有用经验,并在任务适配后保留旧技能。ECHO 把成功的子目标片段存进分层双曲记忆,并在控制时检索这些片段。在 LIBERO-Long 上,它的成功率为 93.5%,而原始 π0 为 80.7%;在没有任何 LIBERO-Long 目标记忆的情况下,跨套件泛化达到 89.31%。

ConSFT 处理监督微调中的遗忘问题。它通过 stop-gradient 置信度权重下调高损失迁移样本的权重,减少模型在表现较差样本上的大幅参数更新。在 LIBERO 上配合 π0,它把目标任务成功率保持在 0.90,并把平均旧任务保留率提高到 0.34;标准监督微调只有 0.09。

测试时动作选择与低成本规划

两篇论文都在不重新训练整个机器人策略的情况下降低控制成本。KeyStone 在动作空间里对多个 diffusion 或 flow-matching 动作块采样、聚类,并执行最大簇的 medoid。在使用 GR00T N1.6 的 SimplerEnv-WidowX 上,K=4 时成功率从 50.0% 提升到 63.3%。在使用 SmolVLA 的 LIBERO 上,K=16 时成功率从 50.4% 提升到 57.2%。

GC-IDM 在世界模型控制上采用类似的效率思路。它冻结一个预训练的 LeWorldModel,只训练一个 150 万参数的 goal-conditioned inverse dynamics model。控制器只需一次前向传播就能预测下一个动作,不做 rollout 搜索。在四组基准家族中,它在 8 个设置里的 7 个上达到或超过 Cross-Entropy Method(CEM),并把每次决策的规划成本削减约 100 到 130 倍。

已发布机器人策略的后门与所有权检查

这一时期的安全工作把 VLA 发布和适配看作攻击面。ATAAT 表明,攻击者可以通过分离正常任务梯度和后门梯度,把视觉触发器植入 OpenVLA 风格策略中。在 5% 污染率下,它在用 OpenVLA-7B 的 LIBERO-Spatial 数据投毒中报告了 88.8% 的正常成功率和 83.5% 的定向攻击成功率。触发器包括视觉物体和语义条件,例如抽屉打开或有人戴着手表。

GuardVLA 用了一个相关的后门思路来做所有权验证。它在训练时把固定的 6 位秘密消息嵌入视觉观测,然后在审计时换入触发投影器和分类头。在 LIBERO 上配合 OpenVLA-OFT,水印识别置信度在 Spatial、Goal、Object 和 LIBERO-10 上都接近 100%,而干净模型接近 0。报告的正常成功率与干净基线基本一致。

把代理硬件接入当作机器人瓶颈

Octopus Protocol 处理的是机器人策略开始执行之前的工作:设备发现、驱动代码、工具暴露和修复。一个编码代理会探测操作系统设备,识别能力,生成带类型的 Model Context Protocol(MCP)工具,编写 FastMCP 服务器,并部署 HTTP/SSE 端点。

论文报告了大约 10 到 15 分钟的一键硬件接入流程,最多可生成 30 个 MCP 工具。相同的 markdown 规范可运行在 Windows/WSL、Apple Silicon macOS 和 Raspberry Pi 4 上。在一条带 USB 摄像头反馈的 SO-ARM101 6-DOF 机械臂上,MCP 客户端通过拍照、移动一个关节、再用另一张图检查结果,实现闭环视觉-运动控制。

较新可执行证据主导智能体软件可靠性研究较早编码代理正在接受克制、证明和仓库纪律的评判