ttok 1.0 调整默认 tokenizer

Simon Willison · 工具更新 · 阅读原文

原始来源：Simon Willison · 工具更新（simonwillison.net）

用于计数和截断文本的 ttok 发布 1.0，调整默认 tokenizer。升级后应留意计数变化；本地 token 估计仍应与实际 API 用量分开记录。

可信度 65 · 重要性 35 · 新颖度 50

技术与主题

AI 编程 · 系统与效率 · Tokenization · Token Counting

核查依据

• 发布说明与默认设置变化

所属事件

• ttok 1.0 调整默认 tokenizer

收录记录

• 2026-10-11 日报