Linji Hao 等 / arXiv v1,10 月 14 日 · 阅读原文

原始来源:Linji Hao 等 / arXiv v1,10 月 14 日

发现渠道:Hugging Face Daily Papers

Interlock 是经 Hugging Face Daily Papers 发现的一篇长任务训练论文,v1 发布于 10 月 14 日。它针对的不是某一步不会做,而是局部做对之后漏掉关联义务:例如机票订对了,日程和预算却没更新;几份文件也可能彼此一致,却共同采用了一个没有来源支持的假设。论文把“完成”写成三种依赖关系:证据要支持决策,多个选择要共同满足约束,决策还要落实到所有受影响的产物。

这张关系图用来约束训练任务的生成。三个生成角色依次构造可重置的工作区、公开请求与交付约定、私有验收规则。工作区提供资料、规则和初始文件,公开请求告诉求解 Agent 要交付什么,私有规则用于检查结果;具体资料对应和行动选择仍留给求解者完成。生成后先追踪原始要求是否在工作区、请求和验收中保留下来,再从求解者视角检查:仅凭公开材料能否推出验收所要求的内容,产物是否真的可检查。这样可以分别抓住“生成时漏了要求”和“暗中要求了读者无从知道的答案”。

执行完成后,带终端工具的裁判根据验收规则检查文件与工作区变化,必要时编写并运行验证脚本。只有所有必需条目通过、另设质量门槛也满足的轨迹才被保留。两个 Qwen3.6 骨干分别用自己的合格轨迹做监督微调,论文称为拒绝采样微调(RFT):先筛选完整成功的执行,再学习这些执行,不是单靠把对话拉长来训练。

培训排程案例把三种关系落到了实处。同一模型面对相同公开输入,一次尝试让日程与发布表彼此相符,却漏掉六名应训人员中的两名;安排的 12:00—14:00 课程又超出 08:00—11:30 放行窗口,还把资格 2 月 12 日到期的讲师排到 16 日。另一次尝试纳入全部六人、使用共同的 09:30—11:30 窗口,并把该讲师排到 11 日。这个案例解释了为何文件之间一致仍不够;它是两次执行的对照,不是训练前后的成效演示。

主实验每个骨干使用 8,957 条自身合格轨迹、约 1.54 亿监督 token,并与原模型及 ClawGym-SFT 比较。Qwen3.6-27B 在 AutomationBench 的任务通过率从 14.33% 到 18.33%,35B-A3B 从 9.00% 到 13.50%。另外,JobBench 的任务加权得分增加 3.20—6.64 分,Harvey LAB 的验收条款通过率增加 3.89—4.16 个百分点;后两者不能换算成完整任务成功率。外部评测题未进入任务合成和训练,这些结果支持所选训练经验能迁移到不同环境。

论文还单独比较了轨迹裁判:固定候选轨迹池、裁判骨干、验收规则及训练预算后,能查文件和运行脚本的裁判比只读工作区文本与差异的裁判,筛出了下游表现更好的训练数据。它支持的是主动核验产物这一环节的价值;完整关系图、任务生成和训练的各自贡献,仍要与这项较窄的对照分开看。

可信度 65 · 重要性 85 · 新颖度 78

技术与主题

Agent 系统 · AI 编程 · 评测与基准 · 训练与对齐

编辑评读

Interlock 把训练目标从“产出一份像样的答案”移到了“兑现所有被激活的义务”。培训案例中,日程与发布表一致只能验证两份产物彼此对得上;查全应训人员、核对放行时间和资格有效期,还需要回到原始资料。关系图的用途正是保留这些回查路径,让验收不被漂亮的最终文件替代。对工程团队而言,先把决定会影响哪些记录列清楚,即使暂不生成训练数据,也能改善任务交接与验收。

两层任务审查同样有实际意义。只检查公开请求与私有规则彼此一致,可能让它们一起遗漏最初的要求;只保护原始要求,又可能把无法从公开资料推知的条件塞入验收。来源覆盖和公开输入审查分别处理这两种错误,使通过更接近“完成了可知的任务”。这不是给任务增加越多条件越好,而是要求条件有来处,并保留求解者需要自己作出的选择。

实验证据应逐层使用。主表支持整套合成、筛选与微调方案的训练价值;固定 8,957 条轨迹、增加领域覆盖的实验支持多样情境的帮助;裁判对照则更直接支持检查实际文件和重新计算。后者在 Qwen3.6-27B 上把 AutomationBench 从文本筛选后的 13.17% 提到 18.33%,但裁判平均输出也由每条约 11.03k 增至 12.28k token,且不计工具返回内容。收益需要和取证费用一起考虑,不能据此宣布核验几乎免费。

这里仍有一个具体的选择:若最终产物的关键条件可用脚本重算,把检查预算放在那些条件上,比继续增加自由文字评价更可追溯;若条件本身模糊,裁判依旧需要判断。后续最有价值的证据是换一批领域后,哪些义务仍被漏掉、哪些合格轨迹被误拒。它能帮助确定训练数据该补什么,而不只是继续增加已经会做的长轨迹。

需要留意

  • 本轮阅读正文方法、实验、对照与案例;未独立复现。预印本首次发布为 10 月 14 日,今天由论文发现渠道再次带入。

核查依据

所属事件

收录记录