Google DeepMind、世界初の二重盲検AI評価を試行
Google DeepMindは、専有のフロンティア級AIモデルを対象とする世界初の二重盲検評価を発表した。外部評価を暗号技術で隔離した環境に限定し、モデルが事前に試験問題へ接触することを防ぐ。シンガポールのAI安全研究所、OpenMined、AVERI、MLCommonsと協力し、プライバシーを保護した環境で非公開ベンチマークを使いGemini Flash Liteを評価する。
#評価・ベンチマーク
#評価・ベンチマーク
今日 0 件8月27日
6月15日
Import AI 461：Sequentの「アラインメントは軌道に乗っていない」、FrontierCode、合成研究実習生
英国AISIのアラインメントチームとTimaeusは非営利Sequentを共同設立した。超知能に備える研究は不十分とし、2～3年で常勤40～80人、初期調達1億～1億5000万ドルを計画する。