LLMが創造性を欠く理由:サプライズ問題
2025-08-17
大規模言語モデル(LLM)は、コメディ、アート、ジャーナリズム、研究、科学などで苦労するのは、基本的にサプライズを避けるように設計されているためです。著者は、ユーモア、優れたストーリー、インパクトのある研究はすべて、最終的に事後的に避けられない驚くべき要素にかかっている、と主張しています。次の単語を予測するように訓練されたLLMは、サプライズを最小限に抑えるため、予測可能でインスピレーションに欠けた出力が得られます。LLMを改善するには、単にサプライズを避けるのではなく、驚くべき真実を積極的に探し求め、解釈する好奇心駆動型のアーキテクチャへの移行が必要です。
続きを読む
AI