本文へ移動

スタンフォード研究:LLMの結論の44%がすでに無効に

まずはこの出来事を

AI によるまとめ

2026年11月4日、The Decoderはスタンフォードの研究者Owen QueenとJames Zouによる再検証研究を報じた。両氏は8社の開発者が2024年7月から2026年9月までに公開した20モデルを選び、広く引用されてきたLLMに関する50の結論を再検証した。結果、44%の結論はすでに無効となり、さらに34%は明らかに弱まり、依然として成立するのは16%にとどまり、6%はむしろ強まった。報道によれば、これらの結論の平均寿命は15.7カ月だという。現時点ではこの研究結果が報じられた段階で、他の機関からの反応や追試の報道はない。

報道をもとに AI が作成 · 2 時間前に更新

報道の時系列

報道をたどり、出来事のさまざまな面を知る。

11月4日
  1. The Decoder
    スタンフォード大の研究:LLMの結論の44%が失効、平均寿命は15.7カ月

    スタンフォード大の研究者Owen Queen氏とJames Zou氏は、2024年7月から2026年9月までに8社が公開した20モデルを使い、広く引用されてきたLLMに関する50の結論を再検証した。その結果、44%が失効し、さらに34%が明らかに弱まっていた。依然として成立するのは16%にとどまり、6%はむしろ強まっていた。

この出来事の注目度の推移

連続した観測データがまだ足りないため、推移は描いていません。