【DS検定対策】AIが突如目覚める？大規模言語モデルの「創発現象」
大規模言語モデルを巨大化させていくと、ある地点で「昨日までできなかったことが、今日突然できるようになる」という不思議な現象が起こります。これが「創発現象」です。
1. 【 問題 】
大規模言語モデル（LLM）において、モデルの規模（パラメータ数など）が一定のしきい値を超えたとき、それまで解けなかった複雑な問題や未知のタスクが、突如として高い精度で解けるようになる現象を何と呼ぶでしょうか？
① 収束現象
② 創発現象（エマージェンス）
③ 特異点（シンギュラリティ）
④ 過学習（オーバーフィッティング）
2. 【 解答 】
3. 整理：量から質への「劇的な変化」
創発現象は、「ただの単語予測機」が、あるサイズを境に「論理的な思考を持つ知能」のように振る舞い始める現象を指します。
【 創発現象のイメージ 】
性能はなだらかに向上するが、難しい数学や多段階の推論は全く解けない。
[ 巨大モデル（しきい値突破！） ]
★ ここで創発が起こる！
性能グラフが垂直に近い角度で立ち上がり、それまで正解率0%だったタスク（例：複雑なパズル、ジョークの解説、プログラミング）を解き始める。
--------------------------
◎ 特徴： 単なる計算量やデータ量の増加から、質的な能力（未知のタスクへの対応力）が生まれる点にあります。
4. 創発によって現れる代表的な能力
1. 多言語推論: 学習データに少ない言語でも、他の言語の知識を応用して理解し始める。
2. Chain-of-Thought（思考の連鎖）: 手順を追って考える能力が備わり、複雑な算術問題などが解けるようになる。
3. ゼロショット学習: 追加の学習なしで、指示（プロンプト）だけで新しいタスクをこなす。
5. DS検定形式：実戦4択クイズ
問：創発現象に関する説明として、最も適切なものはどれか。
① モデルの規模を大きくしても、性能は常に一定の割合でなだらかに向上する。
② 小規模なモデルでも、学習時間を長くすれば創発現象は必ず発生する。
③ ある一定の規模を超えると、それまで予測困難だった高度な能力が不連続に現れる。
④ 創発現象は画像認識モデルで多く見られ、言語モデルでは発生しにくい。
【 正解： ③ 】
解説： 創発現象の鍵は「不連続な向上」です。なだらかな成長（スケーリング則）とは別に、あるポイントで能力が爆発的に開花するのが創発の大きな特徴です。
6. まとめ
DS検定において「モデルが一定以上になると」「不連続に未知の問題が解けるようになる」という記述があれば「創発現象」が正解です。なぜ世界中の企業が巨大モデルの開発に挑むのか、その大きな理由の一つがこの現象を期待してのことなのです！
