一、介绍
Cinemo模型是一个在图像动画领域具有创新性的方法,它能够将静态图片转换成动态视频,同时保持图片原有的细节和风格不变。
Cinemo模型由来自莫纳什大学、上海AI Lab和南京邮电大学的研究团队提出,旨在实现更好的运动可控性以及更强的时间一致性和流畅性。该模型通过新颖的图像动画方法,解决了在将静态图像转换为动态视频时保持时空一致性和叙事流畅性的挑战。
二、部署流程
环境推荐配置
系统:Ubuntu系统,
显卡:3060,
显存:12G,cuda11.8
特别提示:使用显卡3090的效果会更完美
1. 基础环境
查看系统是否有Miniconda3的虚拟环境
conda -V
如果输入命令没有显示Conda版本号,则需要安装。

2.更新系统命令
输入下列命令将系统更新及系统下载
apt-get update && apt-get install ffmpeg libsm6 libxext6 -y

3.下载模型
输入下列命令对Cinemo模型进行下载同时进入项目中
git clone https://github.com/maxin-cn/Cinemo
cd Cinemo

4.创建虚拟环境
运行environment.yml文件
conda env create -f environment.yml

激活“cinemo"虚拟环境
conda activate cinemo

5.添加Cinemo 模型的权重文件
输入下列命令:
bash pipelines/animation.sh
三、网页演示
在本地运行 gradio 应用程序,使用下列命令运行项目呈现模型的成功界面
python app.py

426

被折叠的 条评论
为什么被折叠?



