FramePack: Um Modelo Revolucionário de Predição do Próximo Frame para Geração de Vídeo com IA

FramePack é uma arquitetura revolucionária de rede neural para previsão do próximo frame que comprime contextos de entrada para um comprimento fixo, tornando a carga de trabalho de geração independente do comprimento do vídeo. Isso alcança complexidade computacional O(1) para streaming, estabelecendo um novo padrão na geração de vídeo com IA. Ele gera vídeos de alta qualidade usando apenas 6 GB de memória GPU em laptops com RTX 3060. A velocidade de geração atinge 1,5 a 2,5 segundos por frame em uma RTX 4090, mas é 4 a 8 vezes mais lenta em laptops com 3070ti/3060. Seu método de amostragem bidirecional elimina efetivamente o problema comum de deriva na geração de vídeo.