面向 AGENTS.md 文件的合成 bug 修复探针
使用编码代理的仓库团队应该为 AGENTS.md 或等效的仓库指导文件增加一个小型调优任务。这个任务可以生成合成的 bug 修复任务,让代理执行这些任务,记录指令把代理带到错误子系统或漏掉正确测试命令的位置,然后在大小上限内修改指导文件。
Probe-and-Refine 给出了一个具体模式:每轮 10 个合成 bug 修复探针,每个仓库运行 3 到 5 轮,最终指导文件由编码代理复用。在 500 个 SWE-bench Verified 实例上,精炼后的指导达到 33.0% 的平均解决率,静态指导为 28.3%,无上下文为 25.5%。收益主要来自更频繁地产生可评估补丁,这对应了维护者常见的痛点:代理把预算浪费在错误文件中,或沿用过时的本地习惯。
一个低成本的初版可以是在代理已经打开草稿的重点仓库上运行夜间任务。跟踪代理是否生成了可评估补丁、运行了哪些命令,以及哪些指导行被使用或被事实否定。输出要短到每次运行都能读完;凡是修改发布、安全或数据迁移步骤的指导编辑,都需要人工审查。