AIの生成データで学び続けると何が失われるか 「モデル崩壊」の元研究を読む
AINNでは投稿本文・投稿者本人の追記・第三者コメントの全文転載を避け、X公式埋め込みと元投稿への導線を中心に表示します。
AIによる見どころ整理
何について
テツメモ氏はCrazyShyyt氏の投稿を引用し、AIが生成したデータを無差別に繰り返し学習させる「モデル崩壊」を取り上げた。背景にあるのは、オックスフォード大学などの研究者が2024年にNatureで発表した研究だ。
なぜ注目
テツメモ氏は、人が作り出どころを確かめられるデータの価値に注目している。研究が扱ったのは再帰的な学習条件で、現在の特定サービスにモデル崩壊が生じていることを示す測定ではない。
🔰 初学者向け要約
前の世代のモデルがあまり出力しなかった例は、それをもとに学ぶ次の世代にはさらに届きにくくなる。研究で失われた「分布の端」とは、もとのデータには存在した、出現頻度の低い例のことだ。
用語を調べる
公開記事とWeb上の出典をもとに、Geminiが短く説明します。1日5回まで利用できます。
