Ben Stolovitz 在10月31日发布、11月1日更新的年度使用记录,今天因新讨论受到关注。他已从微软 Windows 团队转到 Salesforce AI Research,主要做原型;工作用 token 费用约每月3000美元由公司承担。因此,这是一位有经验、预算较充足的研究工程师的经历,并非普通开发团队的平均生产率调查。
他现在会在独立工作区里同时推进五六个 Agent 任务,能更轻松地试做以前放弃的想法、补紧急问题,也喜欢模型自己调用语音功能来测试产品的巧思。与此同时,管理六段不同对话让他感到过度刺激和疲劳。他今年最成功的一项工作,反而是亲手把约4000行生成代码重写为几百行,使其更容易测试与扩展。
研究中的挫折更能说明边界:做对话轮次识别时,模型能找资料,却会沿着他最初提出的架构继续走;如何区分打断与轮次、如何标注数据,仍让他反复耗费时间,后来与同事交谈才澄清。他很享受原型能力扩大,也在重新寻找自己愿意承担的审查、思考与创作方式。