开源框架FastVideo加速大型视频扩散模型

2024-12-17

FastVideo是一个开源框架,旨在加速大型视频扩散模型的推理和训练。它支持FastMochi和FastHunyuan等模型,能够将推理速度提升8倍。该框架利用知识蒸馏技术,并支持基于PCM的视频DiT模型的蒸馏、微调和推理。此外,FastVideo还具有可扩展的训练功能,支持FSDP、序列并行和选择性激活检查点,并能高效地利用内存进行微调。