Google Research、睡眠フレームワークでLLMの継続学習を実現

2026年10月28日、Google Researchはsleepフレームワークを発表した。大規模言語モデルが活発な対話とオフラインの睡眠を交互に行い、短期のコンテキストを長期パラメータへ定着させる。報道によると、睡眠段階ではMoEのパラメータ拡張、知識蒸留、RLによる模倣学習で記憶の定着を完了し、さらにランダムなエキスパート活性化と勾配フィルタリングによる合成サンプルで自己改善を行う。現時点でこのフレームワークは研究提案の段階にあり、報道は実験規模、評価結果、実用化計画を明らかにしていない。

報道をもとに AI が作成 · 2 時間前に更新

連続した観測データがまだ足りないため、推移は描いていません。