AMD、30億パラメーターの完全オープンソース言語モデル「Instella」を発表

AMDは、AMD Instinct™ MI300X GPUでゼロからトレーニングされた、30億パラメーターの最先端の完全オープンソース言語モデルファミリー「Instella」を発表しました。Instellaは、同様のサイズの既存の完全オープンソースモデルを上回り、Llama-3.2-3Bなどの最先端のオープンウェイトモデルと競争力のある性能を実現しています。AMDは、モデルの重み、トレーニング設定、データセット、コードなど、すべてのモデルアーティファクトをオープンソース化し、AIコミュニティにおける協調とイノベーションを促進します。このモデルは、効率的なトレーニング技術と複数段階のトレーニングパイプラインを活用しています。