トランスフォーマーと量子力学:驚くべき類似性
2025-02-11

研究者が、トランスフォーマーアーキテクチャと量子力学の間に驚くべき類似性を見出しました。コンテキストが意味を明らかにする前に、トークンは量子力学における粒子のように、意味の重ね合わせの状態にあります。自己注意機構は、量子もつれのように、文全体で単語を結びつけ、埋め込みベクトルは確率波動関数のように振る舞い、最終的に明確な解釈に収束します。完全に類似しているわけではありませんが、この類似性は無視するにはあまりにも重要であり、トランスフォーマーの能力の秘密を明らかにする可能性があります。
AI
トランスフォーマー