Vals AIのベンチマークでオープンソースとクローズドモデルのサイバー攻撃能力の差が縮小し続ける

入選の記録

入選二回の合計 156 ≥ 基準の 2 倍 152

情報源の区分

メディアと個人、この区分の基準は 76 点

予備審査

通過：评测开源与闭源AI模型网络攻防能力

推薦理由

Vals AIの攻防ベンチマークは、オープンモデルが長時間のサイバー攻撃タスクでクローズドの最先端モデルに迫り、しかもコストが1桁低いことを示している。

採点はモデルが同じ基準で独立に二回行い、満点は 100。二回の合計が基準の 2 倍に届いたものだけが入選します。基準は情報源の区分ごとに決めています。