FramePack: AI 비디오 생성을 위한 혁신적인 다음 프레임 예측 모델

FramePack은 입력 컨텍스트를 고정 길이로 압축하여 생성 작업량을 비디오 길이와 독립적으로 만드는 혁신적인 다음 프레임 예측 신경망 아키텍처입니다. 이를 통해 스트리밍에서 O(1)의 계산 복잡도를 달성하여 AI 비디오 생성의 새로운 기준을 제시합니다. RTX 3060이 장착된 노트북에서 6GB의 GPU 메모리만 사용하여 고품질 비디오를 생성합니다. RTX 4090에서는 프레임당 1.5~2.5초의 생성 속도를 달성하지만, 3070ti/3060이 장착된 노트북에서는 4~8배 느립니다. 양방향 샘플링 방법을 통해 비디오 생성에서 일반적인 드리프트 문제를 효과적으로 해결합니다.