本文へ移動
原文
Simon Willison·· 2026-10-09

ttok 1.0 リリース:デフォルトの tokenizer を GPT-4 から GPT-5/GPT-6 に切り替え

ttok 1.0

AI による要約

Simon Willison が ttok 1.0 をリリースし、デフォルトの tokenizer を GPT-4 から GPT-5/GPT-6 に切り替えた。

入選の記録

入選せず二回の合計 40 < 基準の 2 倍 152

情報源の区分
メディアと個人、この区分の基準は 76 点
予備審査
通過:发布AI分词器工具ttok 1.0,涉及GPT模型tokenizer

採点はモデルが同じ基準で独立に二回行い、満点は 100。二回の合計が基準の 2 倍に届いたものだけが入選します。基準は情報源の区分ごとに決めています。

情報源:Simon Willison · simonwillison.net