MagicAnimate：使用扩散模型实现时间一致的人类图像动画
徐中聪·张建峰·刘俊豪·严汉舒·刘家伟·张晨旭·冯嘉实· Mike郑寿 新加坡国立大学 | 字节跳动
 |
 |
📢 新闻
- [2023.12.4]发布推理代码和 Gradio 演示。我们正在努力改进 MagicAnimate，敬请期待！
- [2023.11.23]发布 MagicAnimate 文档和项目页面。
🏃♂️ 入门指南
下载StableDiffusion V1.5和MSE 微调 VAE的预训练基础模型。
下载我们的 MagicAnimate检查点。
git lfs建议按照huggingface的下载说明下载上述模型和检查点。
按如下方式放置基础模型和检查点：
magic-animate
|----pretrained_models
|----MagicAnimate
|----appearance_encoder
|----diffusion_pytorch_model.safetensors
|----config.json
|----densepose_controlnet
|----diffusion_pytorch_model.safetensors
|----config.json
|----temporal_attention
|----temporal_attention.ckpt
|----sd-vae-ft-mse
|----config.json
|----diffusion_pytorch_model.safetensors
|----stable-diffusion-v1-5
|----scheduler
|----scheduler_config.json
|----text_encoder
|----config.json
|----pytorch_model.bin
|----tokenizer…
