ACE-Step: 음악 생성 기반 모델로의 한 걸음

ACE-Step은 확산 모델과 심층 압축 오토인코더, 경량 선형 트랜스포머를 통합한 새로운 오픈소스 음악 생성 기반 모델입니다. 기존 LLM 및 확산 모델에서 나타나는 속도, 일관성, 제어 가능성 간의 절충점을 극복합니다. ACE-Step은 A100 GPU에서 최대 4분 길이의 음악을 20초 만에 생성할 수 있으며, LLM 기준 모델보다 15배 빠르면서도 뛰어난 음악적 일관성과 가사 정합성을 유지합니다. 다양한 스타일, 장르, 19개 언어를 지원하며, 음성 복제, 가사 편집 등의 고급 제어 메커니즘을 제공합니다. 이 프로젝트는 음악 AI의 "Stable Diffusion"을 목표로 하며, 미래 음악 제작 도구를 위한 유연한 기반을 제공하고자 합니다.