Simon Willison·· 2026-10-09
ttok 1.0 发布:默认 tokenizer 从 GPT-4 切换至 GPT-5/GPT-6
ttok 1.0
AI 导读
Simon Willison 发布 ttok 1.0,将默认 tokenizer 从 GPT-4 切换为 GPT-5/GPT-6。
入选记录
门槛 76媒体与个人第一次 22第二次 18
未入选两次之和 40 < 门槛的两倍 152
- 信源等级
- 媒体与个人,这一级的门槛是 76 分
- 预筛
- 通过:发布AI分词器工具ttok 1.0,涉及GPT模型tokenizer
评分由模型按同一份标准独立打两次,满分 100;两次之和达到门槛的两倍才入选。门槛按信源等级设定。
来源:Simon Willison · simonwillison.net