5分钟制作丝滑的AI视频-ComfyUI+AnimateDiff

用AnimateDiff Prompt Travel video-to-video搭配ComfyUI制作AI视频，效果丝滑

制作Stable Diffusion动画

1. AnimateDiff的技术原理

AnimateDiff可以搭配扩散模型算法（Stable Diffusion）来生成高质量的动态视频，其中动态模型（Motion Models）用来实时跟踪人物的动作以及画面的改变。

2. 环境搭建

这里我们使用ComfyUI来搭配AnimateDiff做视频转视频的工作流。我们预设ComfyUI的环境以及搭建好了，这里就只介绍如何安装AnimateDiff插件。

3. ComfyUI AnimateDiff视频转视频工作流

• 找到一个真人跳舞视频
• 提取视频帧，并用ControlNet Openpose提取人物动作信息
• 根据视频帧里面的动作信息，使用SD重新绘制每一帧视频
• 组合出完整视频

3.1 读取ComfyUI工作流

直接把下面这张图拖入ComfyUI界面，它会自动载入工作流，在ComfyUI里面载入文件信息。

3.2 安装缺失的node组件

第一次载入这个工作流之后，ComfyUI可能会提示有node组件未被发现，我们需要通过ComfyUI manager安装，它会自动找到缺失的组件并下载安装（！！需要网络通畅）。

点击ComfyUI Manager按钮打开组件管理

安装完成后要重启ComfyUI才能完成载入刚才缺失的组件。

如果网络状态不好，可能会导致下载组件失败，需要多试几次

3.3 下载一个AI绘画模型

这里比较推荐C站上的Dreamshaper 8这个模型，实测动画人物效果比较好，当然大家也