从今天起，在社交平台上看到的小姐姐舞蹈短视频很可能就是AI生成的。
字节跳动新开源基于SD 1.5的 MagicAnimate，它只需要一张照片和一组动作，就能生成近似真人的舞蹈视频。🤪

Github 地址: https://github.com/magic-research/magic-animate

优点: 目前所有跳舞视频方案中最高的一致性.
缺点:
1. 脸和手有点变形 (老问题)
2. 默认配置下, 动漫画变写实风, (注意看视频中的脸) 可能要改checkpoint
3. 默认的DensePose 驱动视频是基于真人的, 如果应用动漫风, 身长会发生改变

GitHub

GitHub - magic-research/magic-animate: [CVPR 2024] Official repository for "MagicAnimate: Temporally Consistent Human Image Animation…

[CVPR 2024] Official repository for "MagicAnimate: Temporally Consistent Human Image Animation using Diffusion Model" - magic-research/magic-animate