Apple enthüllt neue multilinguale und multimodale Basissprachenmodelle

Apple hat zwei neue multilinguale und multimodale Basissprachenmodelle vorgestellt, die die intelligenten Funktionen auf seinen Geräten und Servern antreiben. Ein On-Device-Modell mit ca. 3 Milliarden Parametern, optimiert für Apple Silicon, und ein skalierbares Servermodell, das auf einem neuartigen Parallel-Track Mixture-of-Experts (PT-MoE)-Transformer basiert. Beide wurden mit massiven multilingualen und multimodalen Datensätzen trainiert und durch überwachtes Feintuning und Reinforcement Learning verfeinert. Sie unterstützen mehr Sprachen, Bildverständnis und Tool-Aufrufe und erreichen oder übertreffen vergleichbare Open-Source-Basismodelle. Ein neues, auf Swift ausgerichtetes Framework vereinfacht die Integration für Entwickler.