AI已经发展成这样了！静态图像生成动态视频不是梦

只需要一张人物照片，再配合骨骼动画引导，就能生成自然的动画视频。

_
让钢铁侠动起来。

01.MagicAnimate

1.1简介

MagicAnimate是一款基于扩散模型的人类图像动画框架不仅支持把静止的图片变成动作视频。还能结合文本成动画，而且还支持多人照片。旨在增强时间一致性、忠实保留参考图像，并提高动画的真实感。它可以通过对人体图像进行扩散模型的运算，实现高质量、自然流畅的人体动画效果。MagicAnimate具有高度的可控性和灵活性，可以通过微调参数来实现不同的动画效果。它适用于人体动画创作、虚拟角色设计等领域。

简单来说，MagicAnimate可以做到1张图片+1个骨骼动画生成视频，而且它还支持多人照片生成视频，给视频和直播领域，带来了很大的想象力！

1.2特点

主要功能特点：

1、时间一致性动画：MagicAnimate的目标是根据运动序列使参考图像动起来，并保持时间上的一致性。能够确保动画在时间上的连贯性，动画中的动作看起来自然流畅，没有突兀的变化。

2、忠实于原图：在动画化过程中，它能够保持对原始参考图像的高度忠实度，确保动画中的人物或对象与原图保持一致。

3、跨身份动画：MagicAnimate还能够进行跨身份动画，即使用来自不同视频的运动序列来动画化参考图像。网站展示了三个身份和两个运动序列的视频结果。

4、未见领域动画：该项目能够动画化未见领域的图像，例如油画和电影角色，使其执行跑步或瑜伽等动作。

5、与T2I扩散模型结合：MagicAnimate还可以与DALLE3生成的参考图像结合，使其执行各种动作。每个参考图像的文本提示也在视频下方展示。

6、多人动画：该框架还支持多人动画，根据给定的运动序列动画化多个人物。

1.3安装

①双击“一键启动.exe”。

②之后会打开一个命令提示窗口，项目会自动运行。加载成功后，请自行复制以下网址在浏览器打开“ http://127.0.0.1:7860/”。

③打开链接后，就可以看到项目主界面了：

（注意相关资料和安装包及插件可文末自行扫描获取）

使用

使用非常简单，10秒瞬间上手:

1. 参考图片：点击上传你想要制作动画的参考图片

2. 动作序列：点击上传所需要的骨骼动画视频

3. 随机种子：给生成视频提供随机性，一般不用调整

4. 采样步骤：默认25

5. 指导尺度：跟AI绘画类似，即图片和骨骼动画的近似程度，过高则更接近骨骼动画，但可能会丢失图片的特质，建议就默认7.5即可

02.Animate Anyone

简介

这个项目是由阿里巴巴智能计算研究院所开发，利用扩散模型的强大功能，制作了一个为角色动画定制的新框架，团队设计了ReferenceNet，可以结合参考图像的细节特征，同时又保留复杂的外观特征，通过空间注意力来实现这一点，来保持动画过程中视觉元素的一致性！甚至引入了高效的姿势引导器来指导角色的动作，确保可控性和连续性。并且采用有效的时间建模方法来确保视频帧间的平滑过渡。通过扩展训练数据，可以对任意角色进行制作动画，与其他图像到视频的方法相比呢，在角色动画方面取得了卓越的成果！

前几日，阿里研究团队构建了一种名为 Animate Anyone 的方法，只需要一张人物照片，再配合骨骼动画引导，就能生成自然的动画视频。不过，这项研究的源代码还没有发布。

其实在 Animate Anyone 这篇论文出现在 arXiv 上的前一天，新加坡国立大学 Show 实验室和字节联合做了一项类似的研究。他们提出了一个基于扩散的框架 MagicAnimate，旨在增强时间一致性、忠实地保留参考图像并提升动画保真度。并且，MagicAnimate 项目是开源的，目前推理代码和 gradio 在线 demo 已经发布。

• 论文地址：https://arxiv.org/pdf/2311.16498.pdf

• 项目地址：https://showlab.github.io/magicanimate/

• GitHub 地址：https://github.com/magic-research/magic-animate

为了实现上述目标，研究者首先开发了一个视频扩散模型来编码时间信息。接着为了保持跨帧的外观连贯性，他们引入了新颖的外观编码器来保留参考图像的复杂细节。利用这两个创新，研究者进一步使用简单的视频融合技术来保证长视频动画的平滑过渡。

实验结果表明，MagicAnimate 在两项基准测试上均优于基线方法。尤其在具有挑战性的 TikTok 跳舞数据集上，本文方法在视频保真度方面比最强基线方法高出 38％以上。

我们来看以下几个 TikTok 小姐姐的动态展示效果。

除了跳舞的 TikTok 小姐姐之外，还有「跑起来」的神奇女侠。

戴珍珠耳环的少女、蒙娜丽莎都做起了瑜伽。

除了单人，多人跳舞也能搞定。

与其他方法比较，效果高下立判。

资料软件免费放送

次日同一发放请耐心等待

关于AI绘画技术储备

学好 AI绘画 不论是就业还是做副业赚钱都不错，但要学会 AI绘画 还是要有一个学习规划。最后大家分享一份全套的 AI绘画 学习资料，给那些想学习 AI绘画 的小伙伴们一点帮助！

感兴趣的小伙伴，赠送全套AIGC学习资料和安装工具，包含AI绘画、AI人工智能等前沿科技教程，模型插件，具体看下方。

需要的可以扫描下方优快云官方认证二维码免费领取【保证100%免费】

**一、AIGC所有方向的学习路线**

AIGC所有方向的技术点做的整理，形成各个领域的知识点汇总，它的用处就在于，你可以按照下面的知识点去找对应的学习资源，保证自己学得较为全面。

二、AIGC必备工具

工具都帮大家整理好了，安装就可直接上手！

三、最新AIGC学习笔记

当我学到一定基础，有自己的理解能力的时候，会去阅读一些前辈整理的书籍或者手写的笔记资料，这些笔记详细记载了他们对一些技术点的理解，这些理解是比较独到，可以学到不一样的思路。

四、AIGC视频教程合集

观看全面零基础学习视频，看视频学习是最快捷也是最有效果的方式，跟着视频中老师的思路，从基础到深入，还是很容易入门的。

五、实战案例

纸上得来终觉浅，要学会跟着视频一起敲，要动手实操，才能将自己的所学运用到实际当中去，这时候可以搞点实战案例来学习。

这份完整版的学习资料已经上传优快云，朋友们如果需要可以微信扫描下方优快云官方认证二维码免费领取【保证100%免费】