OpenAI News·· 14 時間前
OpenAI、AIの日常業務遂行能力を測るベンチマーク「LifeVal」を公開
LifeVal
AI による要約
OpenAIは、保育園探しや家計管理、行政書類の手続きなど、人々の日常業務をAIがどれだけ支援できるかを測るベンチマーク「LifeVal」を公開した。
入選の記録
基準 60公式・一次情報1 回目 422 回目 42
入選せず二回の合計 84 < 基準の 2 倍 120
- 情報源の区分
- 公式・一次情報、この区分の基準は 60 点
- 予備審査
- 通過:OpenAI发布AI日常任务评测基准
採点はモデルが同じ基準で独立に二回行い、満点は 100。二回の合計が基準の 2 倍に届いたものだけが入選します。基準は情報源の区分ごとに決めています。
情報源:OpenAI News · openai.com