Janus-Pro-7B: 통합된 멀티모달 이해 및 생성 모델

DeepSeek은 멀티모달 이해 및 생성을 통합한 혁신적인 자기회귀 프레임워크인 Janus-Pro-7B를 발표했습니다. 기존 접근 방식과 달리 Janus-Pro는 시각적 인코딩을 효과적으로 분리하여 단일 트랜스포머 아키텍처 내에서 효율적인 처리를 가능하게 합니다. 이 분리는 시각적 인코더의 이해 및 생성 역할 간의 충돌을 해결할 뿐만 아니라 프레임워크의 유연성을 향상시킵니다. Janus-Pro는 이전의 통합 모델을 능가하며 작업별 모델과 동등하거나 그 이상의 성능을 발휘합니다. 단순성, 높은 유연성, 효율성으로 차세대 통합 멀티모달 모델의 강력한 후보입니다.