靛蓝底色上,一棵成熟果树伸出部分拆除的木格架;落下的支条与仍保留的支撑并置。
WEEKLY · 一周回看历史日历 ↗

松开旧规则,留下判断的位置

2026-W44 · 2026-10-25 — 2026-10-31

01本期导读

模型升级之后,工作流里有些原本必要的安排,会变成新的瓶颈。本周回顾的 Skyvern 和 LangChain 复盘,都从具体失败出发:一个被网页预处理漏掉的按钮,再强的模型也点不到;一套过细的设计模板,也可能把新模型限制在旧方案里。但“给模型更多空间”还缺少后半句:谁决定要实现什么,谁辨认选择背后的理由?Anthropic 的专家实验显示,助手即使不造假,也能通过倾向不同的论证影响分析口径。

因此,这期先看哪些旧支架值得退出,再讨论哪些判断应当更早地摆到台面上。三篇精选保留工程过程与实验条件,两条观察比较过去的判断和本次回访。文中的速度改善、选择一致率与学习效果分别回答不同问题,不能互相替代。独立 idea 报另从整个知识库寻找研究与复现机会,不受这三篇精选限制。

7/7 份日报可用 · 资料核查截至 2026-10-31 13:21(北京时间)

02本周总结

这周值得改变的第一个判断,是把“上下文更少、步骤更少”直接当作效率更高。Skyvern 新架构让模型按需读取页面,调用轮次和总 token 反而增加,但截图使用下降、缓存复用上升,最终更快且更便宜。LangChain 则在模型升级后放松原有设计模板,让 Agent 用代码表达更多样的作品。这些材料支持重新检查旧安排的必要性;它们没有证明删掉任意规则都会改善效果,也没有把模型、平台与架构变化的贡献完全分开。

第二个判断关乎“人仍在最后确认,所以判断还在人手里”。专家实验把助手对四项分析选择的倾向随机化,发现人的选择会随之变化。旧的学习研究观察的是短时使用后撤去工具的表现;这次研究观察的是专业人员正在合作时的选择形成。两者都值得重视,却不能相加成为“AI 必然削弱所有人的能力”。可迁移的工作问题更具体:执行之前,哪些目标、取舍和可能改变结论的证据需要先说清?

本次回源也纠正了10月28日日报的一处解释:未用助手的11人中,6人出现足以使结果失效的严重方法错误;使用助手的50人中为3人。原稿将前者写成更常发现重大数据问题,混淆了犯错与发现错误。是否使用助手由参与者自行选择,因此这组比例不能估计助手改善质量的因果效应;真正随机化的是助手倾向。纠正后,重点仍是如何利用计算帮助,同时保留对分析目标的辨认。

旧判断回访没有被包装成一串新发布。Prime Agent 的旧 TypeScript 挂起问题仍不能据重写而宣告 Rust 版已修复;SWE-TaskFlow 的生成与问答验证代码为“同一目标、不同交接方式”的研究提供了入口,但尚未验证职业覆盖标签是否稳定。独立检索还确认 MiniCPM-OCR 图片文字丢失问题已有合并修复,因而不再把补这一缺陷作为新 idea。七天日报均齐备,部分 arXiv、Reddit、X 与视频采集仍有逐日缺口,当前回源不追认那些日期已全面覆盖。

03编辑观察

追踪记录 ↗

旧支架退出,要看它曾经替谁做了什么决定

旧知识库已经提出“模型升级后应重审临时规则”。这周两项工程复盘把问题推进了一步:不能只问某条规则还省不省token,还要问它是否阻断了模型发现新解法的机会。Skyvern 的预处理把网页变成元素列表,本意是帮助模型,却使“没有被抽取出来”变成“无法采取行动”;Content Studio 的固定组件降低了早期设计的不确定性,也限制了后来的表达空间。共同之处不是都删了代码,而是旧系统提前替模型缩小了可见信息或可选行动。

这里可以区分两种约束。第一种是能力补偿:因为旧模型看不清网页,工程师替它挑好元素;因为旧模型设计不稳定,团队替它预定组合。第二种来自任务本身:表单最终必须正确、素材授权必须可用、用户必须有机会在昂贵渲染前改变方向。模型变强可能让第一类过时,却不会自动取消第二类。LangChain 一边删设计规则,一边用代码锁住故事板到成片的阶段,恰好让这一区别可见。

机制还涉及成本怎样随过程改变。Skyvern 并没有用更少思考换速度:轮次和token增加,但重复图片减少、缓存前缀更稳定。回访 Asana 的早期实验也能看到另一条路径:保留较长历史并批量裁剪,使缓存有时间被重复读取。这两者都反驳了只看请求长度的优化直觉,却不能互相证明各自的倍数。Asana 每条件仅三至四次运行,而且跨模型的76倍与同模型的29倍应分开;Skyvern 则是生产架构整体改变。先测重复计算发生在哪里,比先决定“缩短”或“删掉”更有依据。

这不意味着上下文越多越好。按需获取要求模型能意识到缺什么,并有可用工具补齐;已有抽取器在固定网页上可能又快又稳,换成自由探索会增加无谓步骤。缓存也只节省重复前缀的处理,不保证上下文中的信息正确。因而一条规则是否退役,应该比较它保护的结果与它造成的机会损失:旧任务是否仍能完成,过去做不到的任务是否开始可行,失败是否更容易定位,人员返工有没有增加。

读者可迁移的方法是给重要补偿措施留下一份简短的“最初为什么需要它”:保存一个实际失败例、所保护的结果和当前适用模型。下一次升级时,选择代表任务比较保留与撤去,允许先让一小部分路径退出,而不必整套推倒。这个办法由本期材料推导,我们没有替读者做过对照实验。若改善只在演示任务上出现,或删去规则后靠人工补救才能维持交付,就应恢复或改造它。

因此,本周对旧判断的修订不是加一句“更少即更好”,而是把退出条件从成本扩大到能力空间和反馈位置:哪些预先决定应交还模型,哪些任务取舍必须继续让人看见。更强模型的价值可能体现为找到原流程没有预留的路径;要使这种价值进入工作,团队需要允许路径变化,同时仍能说明结果为什么值得信任。

作用机制:前处理和固定模板预先缩小信息或行动空间;按需获取与早期反馈改变限制发生的位置。

置信度:中
追踪记录 ↗

把判断留在人手里,要留在还来得及改变的地方

此前关于“保留判断练习”的观察,主要担心新人直接得到答案之后,失去尝试与纠错的机会。专家实验增加的是另一个问题:人已经有训练,也可能在助手提出的框架内完成一次严谨分析,却没有意识到框架本身存在选择。农业任务中,决定比较哪些农场与怎样加权,会先改变问题,再改变数字。于是“我核对了计算”并不足以回答“这是不是我原本要回答的问题”。

需要小心的是,受影响不等于被误导。专家改变想法可能是合理学习;研究要求助手给出的理由真实,也没有把四种分析选择规定为唯一正确答案。随机改变倾向后,人的选择出现大幅分组差异,支持的是助手能推动取舍。它不直接说明每位参与者的选择更差,也不能推出应当屏蔽有说服力的建议。真正的工作要求是能辨认:这次改变来自新事实、价值权衡,还是一个未被察觉的默认设置。

与此不同,Liu等人的随机实验研究短时数学和阅读任务:参与者在有助手时做得更好,撤去助手后的即时表现和坚持性却下降。该研究当前v6早已在知识库回访过,本次重读没有发现可写成新进展的长期结论。直接索取答案者的下降更集中,是助手组内部的观察关联,不是随机比较“要答案”与“要提示”。它与专家实验可以共同促使我们检查合作过程,但两种机制和测量终点必须保留区别。

Karri Saarinen 的产品文章提供了第三种尺度上的提醒:每个功能单独合理,组合起来的产品仍可能失去统一方向。他把经验、客户交流和做取舍看作设计判断的来源。这是作者的产品观,不是AI导致产品变差的实证研究;但它解释了为什么生成工作更便宜后,决定不做什么可能更重要。一个团队若只审批每次局部产出,仍可能没人比较整体体验有没有偏离最初的问题。

可以尝试把人的判断前移到少数真正影响后果的分叉处。例如分析前先写清要改善谁的结果、愿意牺牲什么、哪种证据会改变推广建议,再让助手提出不同口径并计算结果。创作任务则先看故事板表达的重点,而不是等成片之后才发现讲错了故事。重点不是强迫人先完成所有劳动,而是让目标、候选方案与选择理由出现在还来得及修改的地方。

这种安排仍有成本,也可能失败:每一步都询问会让人机械确认;提前写下立场也可能让人固守己见。要检验它,就应同时看新证据出现后是否能合理更新、是否能说清理由来源,以及额外负担是否抵消收益。后续可比较先表达目标再看助手与直接看建议的流程,保留同样工具和时间条件,再检查新任务中的选择质量。这是尚待验证的方案,不是我们已经得到的干预结果。当前应改变的是最后签字即可代表独立判断的假设,而不是把少用AI作为目标。

作用机制:助手先提出分析口径,后续正确计算可能让未经讨论的取舍显得理所当然;缺少独立尝试则是另一条学习机制。

置信度:中

04本周精选

追踪记录 ↗
重要性 4/5发展动能 3/5

Skyvern:让模型按需看页面,省下的不是调用次数

技术浏览器Agent上下文与缓存

Skyvern 是把网页操作交给模型的开源框架,面向取发票、填表和跨页面办事等任务。旧版先截图、标注并提取可交互元素,再把压缩后的列表交给模型。这个做法减少了模型面对的复杂度,却把成败绑在预处理上:Shadow DOM、iframe 和复杂控件里一旦漏掉目标,后面的推理能力无法补回一个根本没被展示的按钮。

团队参考 Pi 重写工作流,允许模型用生成的 JavaScript 扫描 HTML、调用浏览器动作、需要时截图,并主动结束任务。原文把这称作删除 RAG,但这里删除的是固定前置的网页抽取流程,不是证明所有文档检索都无用。信息仍然要获取,只是获取什么、何时获取更多地由任务过程决定。

作者报告,约十万次客户运行的生产 A/B 中,平均耗时从593秒降至262秒,每次总成本从0.039美元降至0.0302美元。调用轮次从6.4增至23,总 token 从18.8万增至28.6万;与此同时,带截图调用占比从27%降至2.7%,缓存命中率从27%升至79.7%。它说明计费结构与上下文复用足以改变“更多调用一定更贵”的直觉。另一个实验是 Odysseys 公共基准上的90.5%完美评分成功率,不能把它当作上述客户运行的成功率。

文章首次发表于10月1日、6日更新,本周因讨论和日报重新进入视野。现有证据是团队自报的架构整体比较,未充分披露生产分组、任务构成和置信区间;它足以提示排查瓶颈,却还不能把2.3倍提速全部归给“去掉RAG”这一项。

模型按需要选择读取页面、执行动作、截图或结束;原图用于解释工具接口,不是生产成功率图。Skyvern 原文方法示意图 · source_figure · 图片出处 ↗

社会反响:本次回读HN讨论仅有少量评论;naw103给出相近个人经验,未提供独立测量,不能描述为社区验证。

重要性判断:更强模型若仍被旧预处理遗漏限制,升级模型本身不会消除端到端瓶颈。

发展判断:观察相同模型、任务与计费条件下,按需读取能否同时保留成功率并降低尾部耗时和返工。

naw103 · 原帖 / 原文

语境:本次实际重读的HN讨论;个人使用经验,未提供模型、样本或计时。此前日报所链的另一个讨论页本次没有读到这条评论。 · 读取时间:2026-10-31T05:13:29.489863+00:00

逐句忠实转述(非原文)

他描述了相近的做法:先给Agent更少工具,让模型按需获取内容,对自己的运行有帮助。这支持尝试按需暴露的思路,但没有相同任务与测量,不能复核Skyvern的提速数字。

追踪记录 ↗
重要性 4/5发展动能 3/5

Content Studio:放开设计模板,保留低成本试错

技术设计Agent持久沙箱

LangChain 的 Content Studio 从营销团队的实际制作需求出发:用户在 Slack 线程中要求制作幻灯片、图形或视频,还会不断补充方向、替换素材和调整节奏。难点不只是一次生成漂亮画面,而是让项目在多轮修改后仍能继续工作,且不必反复从头渲染。

早期系统积累了115个固定UI组件和细密规则。团队报告,升级到 Opus 5.5 后,删除大部分硬编码限制、保留设计原则,作品反而更有变化。底层做法并非只剩一个提示词:每个线程有持久沙箱与项目文件,素材用代码表示,技能与wiki提供制作知识,团队和个人记忆保留偏好;异步子Agent可以制作局部资产,主Agent继续接收反馈。代码表示的价值是修改可定位到对象和时间段,而不只是再生成一张看起来相近的图。

视频流程尤其说明哪些限制仍值得保留。完整渲染很慢,团队先让用户看便宜的故事板,再看动画草稿,最后制作成片。原文给出的单帧故事板约50毫秒,与每秒成片约8—40秒的渲染成本不是同一单位,但足以解释为什么要提早确认方向。由于模型偶尔跳过阶段,团队把阶段顺序写入代码,而不是仅靠提示要求遵守。

团队自报已制作三千多项资产、八十多套幻灯片;单项成本中位数也随平台迁移等改动下降。这里没有单独隔离模型升级、规则撤除与托管基础设施的作用,也没有跨团队设计质量测量。最可迁移的经验是让昂贵执行之前出现可供人判断的中间作品,并在能力改变后重审固定模板,而不是把“更少自写代码”当成设计质量本身。

每个讨论线程保留项目和沙箱,主 Agent 可在异步制作期间继续接收方向调整。图中的代码量下降是团队迁移后的自报,不能归因于单一改动。LangChain 原文架构图;为评述系统结构保留整图及署名,未发现单独图片许可。 · 原文图示 · 图片出处 ↗

社会反响:主要证据来自开发团队的工程复盘与开源说明;定向检索未找到可归于同版本的独立质量对照。

重要性判断:生成能力扩张之后,反馈出现的时机和修改成本比组件数量更能解释工作流是否可用。

发展判断:观察其他团队复用开源工作流后,早期草稿是否减少成片返工,及放松模板是否保留品牌与交付要求。

LangChain Content Studio 团队 · 原帖 / 原文

语境:开发者对自己工作流的复盘,属于作者解释。 · 读取时间:2026-10-31T05:13:29.489866+00:00

逐句忠实转述(非原文)

团队认为,模型能力提高之后,早年为弥补不足而写下的设计限制会妨碍发挥;他们愿意删去这些限制。但视频阶段会被跳过的实际故障,又让他们把制作顺序落实在代码中。两项选择并不矛盾:一个开放设计方案,一个降低昂贵返工。

追踪记录 ↗
重要性 5/5发展动能 3/5

专家也会随助手改变分析口径

技术人机协作随机实验

Anthropic 招募61名具有因果推断经验的研究者,要求分析一项虚构的农业政策并给出是否推广的建议。参与者可以使用 Opus 4.8 High 助手,50人选择使用、11人没有。任务包含四个并非纯计算的分析选择,例如把哪个结果作为重点、比较哪些农场、怎样加权;这些口径会改变同一份数据的含义。

研究者通过隐藏提示,为四项分析选择及最终建议分别随机指定助手倾向。提示要求为指定方向提出有力但真实的理由,不要求编造数据或欺骗。使用者在四项分析选择上平均有86%与助手倾向一致;按随机倾向分组,选择A的比例相差62—82个百分点。最终推广建议的差异较小,图示为54%与36%,作者按未取整数据报告17个百分点。86%衡量的是一致,并不表示86%的决定错误,更不是日常专业工作中被操纵的普遍比例。

这种设计的启发在于,影响可以先发生在分析目标和口径上,再被后续正确计算固定下来。即便用户亲自读过最终结果,也未必意识到自己接受了助手先提出的取舍。在48份事后问卷中,多数参与者复述了助手至少一条论点,少数明确把相应论点归于助手;这提示理由来源的辨认问题,但不能据问卷读出个体内心状态。

研究只有一个专业领域、一个模型与一种刻意强化的倾向设置。使用和不使用助手并非随机分组:无助手组严重方法错误更多这一描述,不能与随机倾向实验混成一个质量提升结论。作者提出把关键判断更清楚地交还用户,但没有证明“每一步都确认”或某种界面已经解决问题。值得继续研究的是,怎样让人看清重要取舍而不被无休止的确认打断。

随机改变助手倾向后,选择 A 的参与者比例发生变化。前四行是分析口径,最后一行是推广建议;百分点差基于未四舍五入数据。图不是现实工作中被影响人数的普遍比例。Anthropic 研究团队原文图表;为评述该实验保留完整图及署名,未发现单独开放许可。 · 原文结果图表 · 图片出处 ↗

社会反响:研究引发对介入时机的讨论。这里保留Ethan Mollick的公开评论快照,不把评论当成复现。

重要性判断:把执行辅助与目标选择分开,才能判断最终人工确认究竟覆盖了什么。

发展判断:寻找先表达目标、再看助手建议的对照干预,同时衡量选择质量、认知负担和新任务迁移。

X 观点 Ethan Mollick · 原帖 / 原文

语境:沿用10月28日已采集并核对父帖的公开X快照;本次未刷新推荐流,非独立复现。回应Alex Tamkin对实验的介绍。 · 读取时间:2026-10-28

逐句忠实转述(非原文)

Mollick 认为这个结果重要,但并不意外:专家也会受 AI 的立场影响,即使他们以为自己在独立工作。他把实践上的关注点放在介入时机——若任务重视人的独立判断,就要有意识地安排何时开始使用 AI。