基于仿真视觉真实性的评估检查
机器人评估团队在用仿真分数给 VLA 策略排序前,应该先加一个小型视觉线索回归集。VISER 给了一个可直接参考的模板:PBR 材料、镜面高光、软阴影,以及重建的真实世界操作任务。实用的检查很简单:在有和没有某个视觉线索的成对场景上运行同一策略,再把结果方向和少量真实机器人任务的结果对比。
优先做这件事有明确的操作原因。VISER 报告仿真与真实世界策略表现的平均 Pearson 相关系数为 0.92,它的例子也显示,视觉细节会让任务级结果大幅变化。在 eggplant-in-pot 步骤中,没有镜面高光时成功率是 10%,加上后升到 90%,接近真实世界的 100%。在 put-spoon-on-towel 任务中,软阴影把成功率提到 49%,相比之下,没有阴影时是 12%,真实世界是 42%。如果模拟器丢掉这些线索,排出来的策略顺序就会基于机器人在几何和空间定位上实际要用的信息缺失来做判断。