FramePack: Ein revolutionäres Modell zur Vorhersage des nächsten Frames für die KI-Videogenerierung

FramePack ist eine bahnbrechende Architektur eines neuronalen Netzes zur Vorhersage des nächsten Frames, die Eingabekontexte auf eine feste Länge komprimiert und die Generierungsarbeitslast unabhängig von der Videolänge macht. Dies erreicht eine Rechenkomplexität von O(1) für Streaming und setzt einen neuen Maßstab in der KI-Videogenerierung. Es generiert hochwertige Videos mit nur 6 GB GPU-Speicher auf Laptops mit RTX 3060. Die Generierungsgeschwindigkeit beträgt 1,5 bis 2,5 Sekunden pro Frame auf einer RTX 4090, ist aber 4 bis 8 Mal langsamer auf Laptops mit 3070ti/3060. Seine bidirektionale Sampling-Methode beseitigt effektiv das übliche Drift-Problem bei der Videogenerierung.