Ai2研究：LLMによる研究アイデアの新規性判断は信頼できない
まずはこの出来事を
AI によるまとめ
2026年10月28日、Ai2は研究「Old Ideas, Novel Problems」を公開し、大規模言語モデルが科学研究のアイデアの新規性を判断する信頼性を検証した。併せてベンチマーク、データ、コードをオープンソース化した。研究はICLR 2026の査読意見に基づいて人間のアイデアプールを構築し、高新規性のアイデア154件と低新規性のアイデア145件を含み、さらにLLMが生成したアイデア154件を用意した。報道はテスト結果の詳細を明らかにしておらず、研究がLLMの新規性判断の信頼性に焦点を当てている点のみを指摘している。
報道をもとに AI が作成 · 3 時間前に更新
最新の続報10月28日 00:12
Ai2が研究を公開し、ベンチマーク、データ、コードをオープンソース化。LLMによる科学研究のアイデアの新規性判断の信頼性を検証する。報道の時系列
報道をたどり、出来事のさまざまな面を知る。
10月28日
- Hugging Face BlogAi2研究：LLMは研究アイデアの新規性を信頼できる形で判断できるか
Ai2は研究「Old Ideas, Novel Problems」を公開し、大規模言語モデルが科学研究アイデアの新規性を判断する信頼性を検証した。併せてベンチマーク、データ、コードをオープンソース化した。研究ではICLR 2026の査読意見に基づき、新規性の高い人間のアイデア154件と低い145件からなるプールを構築し、さらにLLMが生成したアイデア154件を用意した。
この出来事の注目度の推移
現在の注目度 9·比較範囲のピーク 9（10月28日 03:00）·過去 24 時間の比較範囲での変化 –
推移は、途切れずに観測できた同じ主体どうしだけで比べるため、現在の注目度の集計より範囲が狭いことがあります。ポインタを動かすかグラフをクリックすると 1 時間ごとの注目度が見られます。キーボードでは左右の矢印キーで切り替えられます。