面向 VLA 部署的多模态扰动回归测试
对于发布 VLA 策略的团队,一个实用的下一步是在部署前和每次微调后都跑一次扰动门控。STRONG-VLA 为这个门控提供了可用的形式:它覆盖文本和视觉的 28 种扰动类型,包括语义漂移、上下文干扰项和动态视觉伪影等留出案例。论文也说明,这件事应该和训练绑定,而不只是做评测。先在逐步增强的扰动难度下训练,再用干净数据重新对齐的两阶段流程,在 OpenVLA、OpenVLA-OFT 和 pi0 上都提高了 LIBERO 成功率,同时把干净性能保持在接近基线的水平。眼下可以先做一个小的内部测试套件,围绕你的机器人实际会遇到的扰动展开:指令污染、遮挡、图像位移和传感器噪声。最便宜的检查很直接:在加入单独的干净数据重新对齐阶段前后,比较干净任务成功率和扰动任务成功率。如果差距缩小,而且干净数据表现没有明显下降,这套训练流程就值得保留。如果没有,团队拿到的是一张具体的失败图,而不是一个平均成功率数字。