面向长周期操作的闭环剩余计划监督器
机器人团队在长周期的家庭或仓库任务中,现在可以搭一个监督层:它根据当前相机视角在每一步后重新规划,保留一段简短的已完成和待完成记忆,并把一个简单的二维轨迹发给动作策略,作为下一步局部移动的指引。LoHo-Manip 给出了这种任务管理和执行拆分的具体做法。它的实际价值在于:当抓取失败或物体位置偏移时,失败的子任务会留在剩余计划里,下一轮轨迹会更新,所以恢复过程仍然在正常控制回路内完成。
第一个可落地版本不需要新的基础模型。可以直接拿现有的短视野 VLA 或扩散策略,加一个在每次观测后改写剩余子任务的规划器,再把轨迹叠加渲染到执行器输入里。一个低成本检验办法是做一组多步任务回放,并注入轻微失败,比如抓偏或物体移动。观察系统能否在不手动重置的情况下继续原本的任务序列。LoHo-Manip 在长程推理和轨迹预测基准上报出了提升,包括 RoboVQA 上的 63.1 和 EgoPlan2 上的 56.7,而且它的回溯式规划器明确会把失败步骤保留在记忆里,直到完成为止。