Ollama의 새로운 멀티모달 엔진: 비전 모델의 로컬 추론
2025-05-16
Ollama는 Llama 4 Scout 및 Gemma 3과 같은 비전 모델부터 시작하여 멀티모달 모델의 로컬 추론을 지원하는 새로운 엔진을 출시했습니다. 이 엔진은 멀티모달 모델에 대한 ggml 라이브러리의 한계를 해결하여 대규모 이미지 및 복잡한 아키텍처(Mixture-of-Experts 모델 포함)에 대한 안정적이고 효율적인 추론을 위해 모델 모듈성, 정확성 및 메모리 관리를 개선합니다. 정확성과 안정성에 대한 집중은 향후 음성, 이미지 생성 및 더 긴 컨텍스트 지원의 기반이 됩니다.
AI
로컬 추론