AI绘画让“老婆”动起来（Stable Diffusion进阶篇：AI动画-图生图批处理）

原创已于 2025-01-07 11:49:38 修改 · 1.3k 阅读

16 ·

CC 4.0 BY-SA版权

文章标签：

#人工智能 #AI作画 #stable diffusion #音视频 #AIGC #计算机 #科技

于 2024-12-13 11:00:30 首次发布

哈喽这里是海绵

在数字艺术领域，AI绘画技术已经逐渐成为艺术创作的新趋势。StableDiffusion作为一款领先的AI绘画工具，推出了AI动画-图生图批处理功能，让你可以轻松将静态图像变成动态动画。现在，让我们一起来探索StableDiffusion的AI动画-图生图批处理功能，开启你的创意动画之旅。

本来今天是不想学习的，但是我去了一趟电玩节之后给我整闷了，人超级无敌多并且东西还没啥好玩的，光是我的老婆八重神子至少么有那么10个coser。

看来以后这种动漫节啥的还得去上海参加，好多卖东西的展会都是在清库存的感觉，而且可能是因为暑假超级多学生去买。

也可能是我老了对这些东西没那么喜欢了，当然更可能的是我喜欢的那种不适合放在公众场合卖，毕竟来玩的未成年不少。

今天就不说啥废话了，我心好累。

这篇笔记作为学完Stable Diffusion后的进阶篇，在这里将会简单学习一下AI动画是怎么制作的。

之前的Stable Diffusion只能生成冷冰冰的图片，我已经迫不及待想要让我的老婆们动起来啦！

AI动画是啥？

其实现在网络上随便一搜索AI动画都能看到有很多视频，但要认真来讲AI动画其实是指将一个视频片段利用AI“重制”成动画质感的特殊加工手段。

除了常见的二次元动画风格以外，AI绘画还可以套一层滤镜一样给视频变化为不同的风格。

像是这样以另一种形式来回味经典也是AI动画常见的用法，甚至有不少商业广告都在逐渐开始用AI绘画来实现一些实拍无法达到的效果或者是为视频带来更多的风格。

目前在市面上有很多可以用于AI动画的软件，大多都可以实现将视频转变为各类画风的视频，但是目前最受欢迎且常用的还是Stable Diffusion。

作为一个免费、开源且功能强大的Stable Diffusion，除了一时半会无法在手机上使用以外，其能实现的效果要强过市面上绝大部分的软件。

不过要学会AI动画的制作最好还是要先学会Stable Diffusion的基本操作、模型原理和插件使用，这里可以先去看看我之前的那些笔记。

其实只是简单会一点也可以做，但是有了扎实的基础后做出来的效果肯定是要更好的。

当然如果是啥也不会看到这篇文章也可以跟着我的步骤尝试一下，毕竟我写到这里也不会，能踩的坑我都会踩一脚、

AI动画的原理

在之前的笔记中都是用Stable Diffusion来生成图片，好像没有找到什么可以用来生成动画的插件或者功能。

但是对于AI来说，无论是动画还是绘画都是生成图像+对图像进行转绘。

动画的原理简单来说就是用一张张静止的图片放到一块连续播放而成，这也是早期的动画制作者都是用定格动画的形式完成。

鹈鹕动画作品-腾讯游戏“乱世王者”定格动画_鹈鹕动画-站酷ZCOOL

这里的每一张图片都是一帧(Frame)，而像是打游戏常见的帧率也是由此而命名。

如今大部分的电影都是24帧每秒，这意味着一秒播放24张图片，像是电视、游戏、互联网等的帧率大多都是25/30帧每秒。

对于简单的眼睛感受来说，10帧每秒就会用动起来的感觉，只要大于24帧就能感觉看到的东西都很丝滑。

对于大部分游戏玩家来说30帧勉强能玩60帧体验丝滑也是这个道理，并且游戏掉帧（指帧数突然降低）卡成PPT也是这么来的。

帧数(Frames)，为帧生成数量的简称。由于口语习惯，我们通常将帧数与帧率混
淆。每一帧都是静止的图像，快速连续地显示帧便形成了运动的假象，因此高的帧率可以得到更流畅、更逼真的动画。

-From 百度百科

在Stable Diffusion中制作AI动画其本质就是把每秒的20-30张画面拆开，在单独重绘每一张画面后回去做成一个完整的视频。

其实一开始就有人尝试用SD制作AI动画，从最开始的图生图再到后面Mov2Mov的出现，而现在又出现了“多帧渲染”、Ebsynth这样的创新工具。

这些都会讲，不过会拆分开来好方便大伙学习自己想要的。

图生图批处理

今天就先讲一个最简单也是最基础的方法，将视频手动拆分成一帧一帧的后批量图生图重绘。

在图生图功能的选项部分有一个批量处理的标签，在这个标签里可以选择一个装有图片的文件夹，然后再设定一个输出图片的文件夹。

下方的两个选项还可以批量导入重绘蒙版和骨骼图，可以在掌握了重绘和ControlNet之后进行一些进阶操作。

如果有过视频剪辑经验例如PermirePro的话，应该会知道PermirePro可以导入一段视频后以JPG/PNG的格式将视频导出为一张张图片。

不过没接触过PR的同学也不用慌，有一位来自国内的大佬开发了一个WebUI扩展（我也会上传到网盘上）：

这个名为IS-NET Pro的扩展可以用于视屏帧拆分、蒙版识别生成（抠像）等，几乎是专精于AI动画的制作。

安装方式可以看我之前安装扩展的方法，或者直接用代码仓库地址下载最简单，在下载完成之后重启WebUI就可以看到有一个isnet_Pro 的选项。

左侧的那一块区域就是可以将视频拆分为帧的功能，在上传完自己想要重置的视频后可以看一下该区域的参数

第一行启用输出帧率控制 在不勾选的时候会按照视频的默认帧率输出图片，如果不知道视频的默认帧率多少可以鼠标右键点击视频文件-属性-详细信息：

这个视频是每秒30帧，也就意味着每秒播放30张图片，属于一个标准流畅的视频。

下面的启用时间段裁剪 则是用于控制视频中的某一段特定时间，如果上传的视频太长了可以用这个功能裁短。

视频输出地址 就是完成视频后那里可以看到重制的视频，然后点击**gen_frame(**生成)后插件就会把视频拆散为一个个单独的帧。

这些被拆出来的图片就是一会要让AI重画的图片了

不过先别急，在正式制作动画之前需要先做一个小小的风格测试，也就是在被拆成一张一张的图片中挑选一张最具代表性的画面，将这个画面放进图生图后调试模型、提示词、参数生成一张想要的画面。

这里具体的选择什么的就看个人喜好了，但是有几点可以注意。

重绘尺寸最好和视频大小一致
重绘幅度最好0.5左右以免画面混乱
提示词不要给得太固定具体
因为其大批量的处理是针对每一帧的画面进行操作，提示词会用到每一帧的画面。

在这里关于提示词的使用原教程给出了一些建议(模版)：

第一行提示词可以用画质标准化的词：(masterpiece:1,2), best quality, masterpiece, hires, original,
第二行提示词描述人物特征: 1girl, brown, long hair, blue dress,
第三行提示词描述背景:white background, simple background,

像是我选择的原视频背景比较简单所以简单形容，如果视频转场什么的幅度较大可以用Dynamic Pose这类提示词增强动态感.

在得到差不多符合自己预期的图片之后，固定随机种子！

然后进点击上方的批量生成，设置好输入和输入的文件夹之后点击生成。

接下来这段时间就可以去洗个澡或者是干点别的，保持电脑运行不要熄屏了什么，因为这个过程会稍微漫长，等待时间取决于设备条件。

‍

在经历了漫长的等待之后（其实也不漫长，我在看宝可梦卡牌半个小时一下子就过去了）可以看到输出的文件夹中已经放好了AI重绘的图片。

生成图片之后还需要一步，那就是把重绘的图片重新拼合成视频，这一步还是可以让isnet_Pro 来完成。

其实也就是Isnet_Pro右侧板块的功能：

输入地址就填写刚刚重绘后图片放置的地方，输出地址就找一个能找得到的位置即可。

要注意生成的帧率必须和原视频帧率一致，然后点击gene_video之后看到log info显示done就好啦！

可爱捏

因为我的成品效果不佳+视频太大了无法上传我就找一个大佬做的很棒的演示放在这里：

这个更像是局部重绘了脸部，让脸部偏向动漫效果，当然这个肯定比全部重新画一遍的工作量要小一些。

针对各位AIGC初学者，这里列举了一条完整的学习计划，感兴趣的可以阅读看看，希望对你的学习之路有所帮助，废话不多说，进入正题：

请添加图片描述

目标应该是这样的：

第一阶段（30天）：AI-GPT从入门到深度应用

该阶段首先通过介绍AI-GPT从入门到深度应用目录结构让大家对GPT有一个简单的认识，同时知道为什么要学习GPT使用方法。然后我们会正式学习GPT深度玩法应用场景。

-----------

GPT的定义与概述
GPT与其他AI对比区别
GPT超强记忆力体验
万能GPT如何帮你解决一切问题？
GPT表达方式优化
GPT多类复杂应用场景解读
3步刨根问底获取终极方案
4步提高技巧-GPT高情商沟通
GPT深度玩法应用场景
GPT高级角色扮演-教学老师
GPT高级角色扮演-育儿专家
GPT高级角色扮演-职业顾问
GPT高级角色扮演-专业私人健身教练
GPT高级角色扮演-心理健康顾问
GPT高级角色扮演-程序UX/UI界面开发顾问
GPT高级角色扮演-产品经理
GPT高级技巧-游戏IP角色扮演
GPT高级技巧-文本冒险游戏引导
GPT实操练习-销售行业
GPT实操练习-菜谱推荐
GPT实操练习-美容护肤
GPT实操练习-知识问答
GPT实操练习-语言学习
GPT实操练习-科学减脂
GPT实操练习-情感咨询
GPT实操练习-私人医生
GPT实操练习-语言翻译
GPT实操练习-作业辅导
GPT实操练习-聊天陪伴
GPT实操练习-育儿建议
GPT实操练习-资产配置
GPT实操练习-教学课程编排
GPT实操练习-活动策划
GPT实操练习-法律顾问
GPT实操练习-旅游指南
GPT实操练习-编辑剧本
GPT实操练习-面试招聘
GPT实操练习-宠物护理和训练
GPT实操练习-吸睛爆款标题生成
GPT实操练习-自媒体爆款软件拆解
GPT实操练习-自媒体文章创作
GPT实操练习-高效写作推广方案
GPT实操练习-星座分析
GPT实操练习-原创音乐创作
GPT实操练习-起名/解梦/写诗/写情书/写小说
GPT提升工作效率-Word关键字词提取
GPT提升工作效率-Word翻译实现
GPT提升工作效率-Word自动填写、排版
GPT提升工作效率-Word自动纠错、建议
GPT提升工作效率-Word批量生产优质文章
GPT提升工作效率-Excel自动化实现数据计算、分析
GPT提升工作效率-Excel快速生成、拆分及合并实战
GPT提升工作效率-Excel生成复杂任务实战
GPT提升工作效率-Excel用Chat Excel让效率起飞
GPT提升工作效率–PPT文档内容读取实现
GPT提升工作效率–PPT快速批量调整PPT文档
GPT提升工作效率-文件批量创建、复制、移动等高效操作
GPT提升工作效率-文件遍历、搜索等高效操作
GPT提升工作效率-邮件自动发送
GPT提升工作效率-邮件自动回复
GPT接入QQ与QQ群实战
GPT接入微信与微信群实战
GPT接入QQ与VX多用户访问实战
GPT接入工具与脚本部署实战

第二阶段（30天）：AI-绘画进阶实战

该阶段我们正式进入AI-绘画进阶实战学习，首先通过了解AI绘画定义与概述，AI绘画的应用领域，PAI绘画与传统绘画的区别，AI绘画的工具分类介绍的基本概念，以及AI绘画工具Midjourney、Stable Diffusion的使用方法，还有AI绘画插件和模板的使用为我们接下来的实战设计学习做铺垫。