本文へ移動
評価の出典

Rapidata SVG · Human Preference

Rapidata · 人間がモデル生成のベクター画像を比較し、視覚的偏好を直接評価する。

公式の評価
News での扱い観察中
根拠の配分採点に使わない
元データの時点未確認
最後に同期に成功まだ取得していません

何をどう測るか

同一の静的SVGタスクのPreference Eloのみを採用する。Alignment、Coherence、Overallは重複して投票しない。公式データセットの固定バージョンの公開成績表を基準とし、元の人間対戦まで追跡可能とする。

この根拠の使い方

観察中:公式データとライセンスは利用可能だが、3つのDeepSeekローリング別名に固定バージョンの証拠が欠けており、成績全体を当面採用しない。評価側の実行バージョンの補完を待つ。現役ソースの予算は削減していない。

評価の限界とデータの出典

SVG 描画はすべてのインターフェースデザインを代表しない。公開された生データにはモデルバージョン、生成日、API fingerprint が含まれず、ローリングインターフェースが版を切り替えたか判断できない。ランキングの更新日からモデルバージョンを推測してはならない。

データのライセンス:CC BY 4.0 · Rapidata/svg-benchmark。公式の帰属表示とデータリンクを保持。

スコアは Rapidata が公開。元のスコアと News のコンセンサススコアは尺度が異なるため、直接合算できない。