ChatGPT に夕日についての詩を書いてもらいます。 そこでクロードに尋ねる。 次にジェミニ。
3 つの異なる詩が表示されますが、よく見ると、すべてに同じ幽霊のような指紋が付いているのがわかります。 構造は驚くほど似ています。 比喩 (「空を描く」、「黄金の時間」) は同じです。 2023 年にこれらのモデルを分けていた明確な「声」は消えつつあります。
この現象には名前があります。 NeurIPS 2025 の研究者たちは、これを 「人工集合体」 効果と名付けました。
再帰的なトレーニング ループによりフィードバック障害が発生しています。 これは理論ではありません。 これはオックスフォードとケンブリッジの研究によって数学的に確実であることが確認されています。 AI モデルが独自の出力でインターネットに飽和するにつれて、相互のデータでトレーニングを開始し始めています。 この近親相姦のループは、ただ単に似ているように聞こえるだけではありません。 それは、インテリジェンスを有用にする分散を根本的に侵食しています。 業界はデジタル版の近親交配を目の当たりにしており、その結果、創造性が徐々に崩壊していきます。
フック: 「ベージュ」の特異点
専門家らは以前、AIが人間とは「あまりにも」異なるもの、つまり人間の微妙なニュアンスを理解できない冷酷で異質な超知性体になるのではないかと懸念していた。
現実はもっと退屈だ。 AIは「平均的な」人間になりつつあります。
ハイブマインド効果は、モデルが同様のヒューマン フィードバックからの強化学習 (RLHF) データセットを使用して「安全性」と「有用性」を最適化し、コモン クロールの同じ部分 (現在 30 ~ 50% が AI によって生成されたテキスト) を消費するにつれて、言語の「潜在空間」内の単一点に収束することを示唆しています。
彼らはパーティーの予期せぬゲストとなり、全員が同じウィキペディアの記事を読み、まったく同じ丁寧で当たり障りのない意見を述べています。
技術的な詳細: 崩壊の数学
これがなぜ壊滅的な事態なのかを理解するには、確率分布 の概念を検討する必要があります。
1. ベルカーブのトランケーション
LLM は確率エンジンとして機能します。 テキストを処理するときに、継続の可能性が計算されます。 初期の頃 (GPT-2、GPT-3)、これらの確率分布は「スパイク」でした。 モデルは時折、乱暴な推測 (創造的な出力をもたらす可能性の低いトークン) を実行することがありました。
ただし、RLHF (ヒューマン フィードバックからの強化学習) のような最新のトレーニング手法は、このような独特のスパイクを罰します。 エンジニアは「奇妙な」答えを避けるためにモデルをトレーニングします。 それらは曲線を平坦化します。
モデル A の出力でモデル B をトレーニングすると、すでに平坦化された分布からサンプリングすることになります。 モデル B では、モデル A よりも「珍しい」単語が少なくなります。 次に、モデル B の出力でモデル C をトレーニングすると、分布の裾が完全に消えます。 これは モデル崩壊 です。
2. 分散の喪失
数学的には、データセットの「分散」は世代ごとに縮小します。
- 第 1 世代 (人間データ): 高い分散、高い創造性、時折のエラー。
- 第 2 世代 (AI データ): 分散が低く、エラーが少なく、「より安全な」トーンです。
- 世代 3 (合成ループ): ほぼゼロの分散。 モデルは、分布の狭い「平均」の外に何かを生成する機能を失います。
3. 「モード崩壊」の悪夢
Generative Adversarial Networks (GAN) では、ジェネレーターがディスクリミネーターをだます 1 つの画像を見つけて、その画像 * のみを生成すると、「モード崩壊」が発生します。
LLM はこれのよりソフトなバージョンに直面しています。 彼らは毎回まったく同じ文章を作成しているわけではありませんが、まったく同じ スタイル の思考を作成しています。 専門知識、つまり古いフォーラムや無名のブログにある奇妙でニッチな人間の詳細は、「平均的な」AI コンテンツの圧倒的な比重によって滑らかにされつつあります。
文脈の歴史: ウロボロス ループ
ギリシャ人はこれを象徴していました。ウロボロス、つまり自分の尾を食べる蛇です。
- 2020 年から 2022 年 (スクレイピングの黄金時代): GPT-3 のようなモデルは、「純粋な」インターネットでトレーニングされました。 Reddit、Twitter、Stack Overflow には、ほぼ人間だけが存在していました。 人類の混沌として乱雑で創造的なデータが燃料でした。
- 2023 (汚染の始まり): ChatGPT が開始されました。 突然、インターネットは AI が生成した SEO スパム、LinkedIn の投稿、学生のエッセイで溢れかえりました。
- 2024 (中毒): 研究者らは、新しいモデルが人間の金と AI のゴミを区別するのに苦労していると指摘しました。
- 2025 (The Hivemind): 現在、主要な研究所が「データの壁」にぶつかっていると報告されています。 これ以上新鮮な人間のテキストはありません。 スケーリングを続けるためには、「合成データ」(AIを訓練するためにAIが作成したデータ)を使用する必要があります。
研究機関は、合成データはクリーンでエラーがないため、人間のデータよりも「高品質」になる可能性があると主張した。 しかし、彼らは要点を見逃していました。品質は多様性ではありません。
Redditの混沌としたスレッドより教科書の方が「質が高い」が、教科書だけでコメディアンを鍛えても面白くない。 それらは正確ですが、退屈になります。
将来を見据えた分析: 「認定された人間」の未来
それで、これはどこで終わるのでしょうか?
「ハイブマインド」効果が続けば、インターネットの二分化が現れるだろう。
1. 「ダーティ」データの価値
逆説的ですが、人間の最も厄介なデータ (タイプミス、スラング、感情的な暴言、フォーラムでの議論) が、地球上で最も価値のある商品になるでしょう。 これは、AI をそのループから抜け出すことができる「エントロピー」またはランダム性の唯一の発生源です。 テクノロジー大手が、オンラインで単純に「人間」で奇妙であることを目的として、ユーザーにお金を払って、新たな変化を収穫するという未来が存在するかもしれません。
2. 特化した「フォーク」
ハイブマインドに対抗するために、企業は汎用の「Do Everything」モデルの使用をやめるでしょう。 代わりに、市場は、壁に囲まれた個別のデータセットでトレーニングされた、高度に専門化された小規模なモデルに戻るでしょう。
- 「Medical Hive」 は、検証済みのジャーナルのみでトレーニングされています。
- 「クリエイティブ ハイブ」 はフィクションと脚本のみを訓練しており、LinkedIn や企業メールを読むことを明示的に禁止されています。
3. ゼネラリストの死
「1 つのモデルですべてを支配する」という夢は消えつつあります。 ハイブマインドは、企業が万人にアピールし、誰も不快にさせないモデルを作ろうとすると、魂のないモデルが出来上がることを示しています。
結論
AI ハイブムこれは単なる美的問題ではありません。 それは情報危機です。 それは彼らが官僚的になっていることの表れだ。 それらは安全で平均的で予測可能なものに収束しつつあります。
人間にとって、これは実は朗報です。 それは、特殊で奇妙で欠陥のある創造性が時代遅れではなく、機械を動かし続ける燃料であることを意味します。 AI が企業のプレスリリースのように聞こえれば聞こえるほど、独特で乱雑な人間の声の価値が高まります。
エッジを磨かないでください。 マシンにはそれらが必要です。
🦋 Bluesky での議論
Bluesky で議論する