本文へ移動
評価の出典

Chess Puzzles

Epoch AI / 推論 · 文字で示された盤面から正しい着手を探す

公式の評価
News での扱い順位に反映
根拠の配分1.8%
元データの時点11/06 09:14
最後に同期に成功11/16 02:05

何をどう測るか

生成された棋局は Stockfish の標準解答で採点する。入力は棋局テキストであり、視覚理解には分類しない。

この根拠の使い方

正式に採点。同一問題ファミリーは固定予算を共有する。

評価結果

固定ルールに従い、各公開モデルは代表的な構成を1つ採用する。匿名テスト型番は表示せず、元のランキング順位を保持し、各項目は最大30件。

元の順位元のモデル名元のスコア代表的な設定
1claude-fable-5-2_maxAnthropic79.0%Max 推論
2gemini-4-carbon_highgoogle78.0%High 推論
4gpt-6-astra_maxOpenAI74.0%Max 推論
5gpt-6.1-sol_max—68.0%Max 推論
7claude-opus-5-5_maxAnthropic67.0%Max 推論
8gemini-3.7-flash_highGoogle66.0%High 推論
9gpt-5.5_xhighOpenAI63.0%xHigh 推論
10gpt-5.5-pro_xhighOpenAI62.0%xHigh 推論
11gpt-5.2-pro-2025-12-11_xhighOpenAI60.0%xHigh 推論
12gpt-5.6-sol_maxOpenAI59.0%Max 推論
12claude-sonnet-5-5_maxanthropic59.0%Max 推論
12gpt-5.4-pro-2026-03-05_xhighOpenAI59.0%xHigh 推論
12gemini-4-argon_highGoogle59.0%High 推論
16gemini-3.8-flash_highGoogle58.0%High 推論
17gpt-6-sol_maxOpenAI56.0%Max 推論
18claude-haiku-5-5_max—55.0%Max 推論
19claude-opus-4-8_maxAnthropic52.0%Max 推論
20gemini-3.1-pro-preview_highGoogle51.0%High 推論
21deepseek-v4.1-flash_maxDeepSeek48.0%Max 推論
21claude-fable-5-1_maxAnthropic48.0%Max 推論
21gpt-5.4-2026-03-05_xhighOpenAI48.0%xHigh 推論
21gpt-5-pro-2025-10-06_highOpenAI48.0%High 推論
21gpt-5.2-2025-12-11_xhighOpenAI48.0%xHigh 推論
26claude-fable-5_maxAnthropic47.0%Max 推論
26gpt-5.6-terra_maxOpenAI47.0%Max 推論
28deepseek-v4-pro-0813_maxDeepSeek46.0%Max 推論
28deepseek-v4.1-flash-1017_maxdeepseek46.0%Max 推論
28qwen3.8-max_xhighAlibaba46.0%xHigh 推論
31gpt-5.4-nano-2026-03-17_xhighOpenAI45.0%xHigh 推論
31gemini-3.5-flash_highGoogle45.0%High 推論
評価の限界とデータの出典

正式に採点。同一問題ファミリーは固定予算を共有する。

データのライセンス:CC BY 4.0 · Epoch AI 独自評価データ

スコアは Epoch AI が公開。元のスコアと News のコンセンサススコアは尺度が異なるため、直接合算できない。