2026-W43 周报

语音客服能够流畅交谈,仍可能把名字、邮箱或电话号码中的一个字符存错。Sierra 的 τ-Entity 把这一痛点单独做成 200 个任务、十类字段的测试:来电者配合回答、可以正确拼写,代理要把字段准确写入工具。任务通常不到两分钟,因此它测的是基础信息采集,不是完整客服工作的成功率。

测试分别放入普通通话、背景噪声和背景说话三种环境。“全部条件通过”要求同一任务在三种环境都成功,并非同一录音随机重跑三次。六语言结果中,GPT Live 1 的普通条件平均为 60.3%,全部条件为 34.0%;英文单列是 74.0% 和 47.5%。语言与环境的差异提醒我们,流畅程度不能替代最终存储字段的精确核对。

作者还研究如何修正。配套论文的四种配置中,明确要求拼写、复述、确认、纠正后再提交,能把全部条件通过比例从约 14%–41% 提高到 37%–54%,每通电话增加约 21–28 秒。这是旧论文四配置的干预实验,不能与新六语言榜单逐项对齐。尤其值得保留的发现是:即使已经核验,初始错误也只有约 24%–37% 得到修正,提醒语句出现不等于纠错完成。

这些结果给出了可改进的流程,而不是宣布语音产品不可用。对需要准确标识符的业务,应把听取、确认、最终写入分开观察,再比较增加的通话时间换来了多少正确结果。本次检索没有取得同版本的独立复测;数值仍应归于 Sierra 的设置与作者实验。

信息来源:Soham Ray · Sierra τ-Entity

Sierra 配套论文 · 四配置核验实验