热点事件持续更新
ttok 1.0 发布默认切换至 GPT-5/6 分词器
1 篇报道1 个报道来源6 小时前更新
先了解这件事
AI 综述
2026 年 10 月 9 日，Simon Willison 宣布 ttok 1.0 正式发布。此次更新将默认分词器从 GPT-4 切换为 GPT-5 或 GPT-6。依据实验数据，GPT-5 与 GPT-6 系列模型（含 5.5、5.6 Sol/Terra/Luna 及 6 Astra/Sol/Luna）均使用相同的 44,794 token 分词器且匹配所有测试用例。该更新旨在解决旧版本默认值错误的问题，确保工具能正确适配最新模型。
AI 根据报道生成 · 2 小时前更新
最新进展10月9日 08:34
ttok 1.0 已发布，默认分词器正式切换至 GPT-5/6。报道时间线
沿着报道，了解事件的不同侧面。
10月9日
- Simon Willisonttok 1.0 发布：默认切换至 GPT-5/GPT-6 分词器
ttok 1.0 正式发布，将默认分词器从 GPT-4 切换为 GPT-5 或 GPT-6。依据实验数据，GPT-5 与 GPT-6 系列模型（含 5.5、5.6 Sol/Terra/Luna 及 6 Astra/Sol/Luna）均使用相同的 44,794 token 分词器且匹配所有测试用例。该更新解决了旧版本默认值错误的问题，确保工具能正确适配最新模型。
本事件热度走势
还没有足够的连续观测数据，暂不绘制趋势。