Stable Diffusion【二次元模型】:最强扁平化风格大模型一键生成插画风格

2024最新controlnet详解:Scribble(涂鸦) Scribble 也可以用来处理真实的图片,与Canny、Lineart、SoftEdge相比,最大的变化就是,构图会发生一些变化,而且它没有对图片深度的处理。 阅读详情

二次元世界,以其独特的魅力,吸引了无数艺术爱好者和动漫迷。如今,借助Stable
Diffusion的二次元模型,你只需一键操作,就能轻松实现扁平化风格的插画创作。本文将带你深入了解Stable
Diffusion二次元模型的使用方法,助你轻松掌握这一技巧。
在这里插入图片描述

Stable
Diffusion是一款基于深度学习的图像生成模型,它能够在没有任何人类指导的情况下生成高质量、逼真的图像。与传统的图像生成技术相比,Stable
Diffusion具有更高的生成质量和更快的生成速度。

今天和大家分享一款基于SD1.5的扁平化风格的二次元大模型:纯平简彩flatanime-
mix。对于喜欢扁平风格的小伙伴们,该模型还是非常值得推荐的。

目前最新的版本是V1.0版本,该版本对提示词的识别非常友好好,人物/场景/物体都能够表现。更多时候,该模型可以作为扁平化插画风格的二次元底膜使用。

模型下载地址 (文末可自行扫描获取)

作者在官网给出了该大模型推荐参数设置。

  • 无需外挂VAE,或者用animevae,(vae-ft-mse-840000-ema-pruned.safetensors可能有一点模糊)

  • 采样:Euler a

  • CFG:7-8

  • 高清修复:R-ESRGAN 4X+Anime6,重绘幅度0.3左右

下面我们来实际体验一下,看使用这个模型出来的图片效果如何吧。

反向提示词

(worst quality:2),(low quality:2),(normal quality:2),lowres,bad anatomy,bad
hands,text,error,missing fingers,extra digit,fewer digits,cropped,jpeg
artifacts,signature,watermark,username,blurry

公共参数设置

  • 大模型:纯平简彩 flatanime-mix V1.0

  • 采样器:Euler a

  • 采样迭代步数:20

  • CFG:7

  • 图片宽高:512*768

1. 微笑

Prompt:(masterpiece, best quality:1.3),1girl,smile,red dress,upper
body,flowers,city background,

提示词 :(杰作,最佳质量:1.3),1女孩,微笑,红衣服,上身,花朵,城市背景,

2. 办公女士

Prompt :(masterpiece, best quality:1.3),1girl,solo,long hair,office
lady,sitting,full body,laptop,working,flowers,

提示词 :(杰作,最佳质量:1.3),1个女孩,独唱,长发,办公室女士,坐着,全身,笔记本电脑,工作,鲜花

3. 圣诞节

Prompt :(masterpiece, best quality:1.3),1 girl holds Christmas gifts in
her hands,wears a Christmas hat,Christmas tree,night lighting

提示词 :(杰作,最佳品质:1.3),1个女孩手里拿着圣诞礼物,戴着圣诞帽,圣诞树,夜灯

4. 绿发女孩

Prompt: (masterpiece, best quality:1.3),1 girl,green hair,curly
hair,green eyes,upper body,white background

提示词:(杰作,最佳质量:1.3),1个女孩,绿色头发,卷发,绿色眼睛,上半身,白色背景

5. 篮球运动员

Prompt: (masterpiece, best quality:1.3),1 boy,playing
basketball,sportswear

提示词:(杰作,最佳质量:1.3),1名男生,打篮球,运动服

6. 日落风景

Prompt: (masterpiece, best quality:1.3),no
humans,scenery,road,moutain,sunset

提示词:(杰作,最佳画质:1.3)、无人、风景、路、山、日落

7. 中国传统建筑

Prompt: (masterpiece, best quality:1.3),no humans,lanterns,traditional
Chinese architecture,mountains

提示词:(杰作,最好的质量:1.3),没有人,灯笼,中国传统建筑,山脉,

8. 花样年华

Prompt: (masterpiece, best quality:1.3),1 girl,red dress,upper
body,flowers, lora:花样年华:0.7

提示词:(杰作,最佳质量:1.3),1个女孩,红色连衣裙,上身,花朵,

好了,今天的分享就到这里了,希望今天分享的内容对大家有所帮助。

资料软件免费放送

次日同一发放请耐心等待

目前 ControlNet 已经更新到 1.1 版本,相较于 1.0 版本,ControlNet1.1 新增了更多的预处理器和模型,每种模型对应不同的采集方式,再对应不同的应用场景,每种应用场景又有不同的变现空间

我花了一周时间彻底把ControlNet1.1的14种模型研究了一遍,跑了一次全流程,终于将它完整下载好整理成网盘资源。

其总共11 个生产就绪模型、2 个实验模型和 1 个未完成模型,现在就分享给大家,点击下方卡片免费领取。

[外链图片转存中…(img-kPjJFmZd-1733740170811)]

1. 线稿上色

**方法:**通过 ControlNet 边缘检测模型或线稿模型提取线稿(可提取参考图片线稿,或者手绘线稿),再根据提示词和风格模型对图像进行着色和风格化。

**应用模型:**Canny、SoftEdge、Lineart。

Canny 示例:(保留结构,再进行着色和风格化)

img

2. 涂鸦成图

方法:通过 ControlNet 的 Scribble 模型提取涂鸦图(可提取参考图涂鸦,或者手绘涂鸦图),再根据提示词和风格模型对图像进行着色和风格化。

应用模型:Scribble。

Scribble 比 Canny、SoftEdge 和 Lineart 的自由发挥度要更高,也可以用于对手绘稿进行着色和风格处理。Scribble 的预处理器有三种模式:Scribble_hed,Scribble_pidinet,Scribble_Xdog,对比如下,可以看到 Scribble_Xdog 的处理细节更为丰富:

img

Scribble 参考图提取示例(保留大致结构,再进行着色和风格化):

img

3. 建筑/室内设计

**方法:**通过 ControlNet 的 MLSD 模型提取建筑的线条结构和几何形状,构建出建筑线框(可提取参考图线条,或者手绘线条),再配合提示词和建筑/室内设计风格模型来生成图像。

**应用模型:**MLSD。

MLSD 示例:(毛坯变精装)

img

这份完整版的ControlNet 1.1模型我已经打包好,需要的点击下方插件,即可前往免费领取!

4. 颜色控制画面

**方法:**通过 ControlNet 的 Segmentation 语义分割模型,标注画面中的不同区块颜色和结构(不同颜色代表不同类型对象),从而控制画面的构图和内容。

**应用模型:**Seg。

Seg 示例:(提取参考图内容和结构,再进行着色和风格化)

img

如果还想在车前面加一个人,只需在 Seg 预处理图上对应人物色值,添加人物色块再生成图像即可。

img

5. 背景替换

**方法:**在 img2img 图生图模式中,通过 ControlNet 的 Depth_leres 模型中的 remove background 功能移除背景,再通过提示词更换想要的背景。

**应用模型:**Depth,预处理器 Depth_leres。

**要点:**如果想要比较完美的替换背景,可以在图生图的 Inpaint 模式中,对需要保留的图片内容添加蒙版,remove background 值可以设置在 70-80%。

Depth_leres 示例:(将原图背景替换为办公室背景)

img

6. 图片指令

**方法:**通过 ControlNet 的 Pix2Pix 模型(ip2p),可以对图片进行指令式变换。

应用模型:ip2p,预处理器选择 none。

**要点:**采用指令式提示词(make Y into X),如下图示例中的 make it snow,让非洲草原下雪。

Pix2Pix 示例:(让非洲草原下雪)

img

7. 风格迁移

**方法:**通过 ControlNet 的 Shuffle 模型提取出参考图的风格,再配合提示词将风格迁移到生成图上。

**应用模型:**Shuffle。

Shuffle 示例:(根据魔兽道具风格,重新生成一个宝箱道具)

img

8. 色彩继承

**方法:**通过 ControlNet 的 t2iaColor 模型提取出参考图的色彩分布情况,再配合提示词和风格模型将色彩应用到生成图上。

**应用模型:**Color。

Color 示例:(把参考图色彩分布应用到生成图上)

img

这份完整版的ControlNet 1.1模型我已经打包好,需要的点击下方插件,即可前往免费领取!

这里就简单说几种应用:

1. 人物和背景分别控制

2. 三维重建

3. 更精准的图片风格化

4. 更精准的图片局部重绘

以上就是本教程的全部内容了,重点介绍了controlnet模型功能实用,当然还有一些小众的模型在本次教程中没有出现,目前controlnet模型确实还挺多的,所以重点放在了官方发布的几个模型上。

同时大家可能都想学习AI绘画技术,也想通过这项技能真正赚到钱,但是不知道该如何开始学习,因为网上的资料太多太杂乱了,如果不能系统的学习就相当于是白学,因为自身做副业需要,我这边整理了全套的Stable Diffusion入门知识点资料,大家有需要可以直接点击下边卡片获取,希望能够真正帮助到大家。
在这里插入图片描述

img

ControlNet引导生成图像的详细教程 controlnet引导stable diffusion生成图像使用教程,边缘检测、深度估计、涂鸦、分割等 阅读详情

相关推荐

[ComfyUI] 进阶教程ComfyUI + ipAdapter 灵活工作流

最近ComFYUI的应用很火,基于ComFYUI的工作流的灵活性很强,使用ip-adapter、AnimateDiff、controlnet等结合有很多新的玩法,本文着重介绍ComFYUI中ip-adapter的应用介绍。

细节控-AI先行者的博客 6255

今日3款Stable Diffusion模型推荐,让你轻松成为AI作图大师!模型推荐系列

今天又给大家带了三款不错的模型推荐给大家,需要的朋友可以根据链接自行获取。今天给大家继续推荐三款AI作图模型。2024-03-17 今日3款模型推荐:1、类型 Checkpoint**推荐理由:**专门为生成人物照片而设计的。能够以惊人的逼真度创造出照片般真实的人物形象作品赏析:2、类型 Checkpoint**推荐理由:**一款非常灵活的模型,能够产生各种风格的杰出人物、风景、建筑等。作品赏析:3、Analog Madness - Realistic model 类型推荐理由。

Misdirection_XG的博客 920

Modelsim安装教程以及管理员身份运行patch_dll.bat时找不到文件mgls.dll的解决

Modesim安装教程 Modesim版本有很多,但是安装方式大都相同,我们以modesim.10.5为例,电脑使用的是win10 64位,讲一下安装过程中的步骤以及出现问题的解决方法 一 安装 1.首先解压安装包,在解压的安装包内选择应用程序,右键选择管理员运行。 2.稍等一会,有的电脑会弹出是否允许modesim进行更改,选择 是 即可,然后出现下面的界面,点击下一步。 3.弹出此界面选择安装路径,选择安装路径,我是在D盘新建的文件夹,直接把文件夹中的路径复制在框内。文件夹名称切记不要带中文 4.

weixin_48564372的博客 1万+

ControlNetPlus:是时候更新你的AI工具箱了,一站式图像生成与编辑组件,ComfyUI最全使用指南

最新xinsir团队发布了一款名为框架,这是一套全新的ControlNet架构,一款专为图像生成和编辑设计的控制模型支持10余种ControlNet控制类型一体(本次发布集齐更多的CN功能一体化方案),在条件文本到图像生成中表现出色,并且能够生成视觉上与Midjourney相媲美的高分辨率图像。ControlNet++采用设计了一种新架构:在基于原始ControlNet架构基础上,提出了两个新模块:• 扩展原始ControlNet,使用相同的网络参数支持不同的图像条件。

2401_85725028的博客 2024

如何理解Fourier Neural Operator (FNO)

2022年Nvidia发表在arXiv上的的FourcastNet作为几乎是最早的一篇气象大模型的工作(之前Google Research的MetNet主要还是对于降水的预报)。除了Transformer的backbone之外,使用到了2021年发表在ICLR上的Fourier Neural Operator。为了更好的理解模型的理论基础,可以详细学习一下以及他的前期工作GNOFNO作者对这两篇文章的解析blog。

momo的博客 1万+

相控阵雷达仿真入门:TWS与TAS模式实战解析(附代码示例)

本文深入解析相控阵雷达仿真中的TWS(边搜索边跟踪)与TAS(搜索加跟踪)模式,提供实战代码示例和优化策略。通过简化模型设计和对象化建模,帮助开发者快速构建高效仿真系统,适用于军事推演和装备评估。文章涵盖核心逻辑、数据结构设计及性能优化技巧,提升仿真效率与准确性。

weixin_30687051的博客 455

Stable Diffusion【二次元模型】:最强扁平化风格大模型纯平简彩flatanime-mix

今天和大家分享一款基于SD1.5的扁平化风格的二次元大模型:纯平简彩flatanime-mix。对于喜欢扁平风格的小伙伴们,该模型还是非常值得推荐的。

2301_80239908的博客 1236

VFH避障/局部路径规划算法

VFH避障/局部路径规划算法 本文章是我看《The Vector Field Histogram-Fast Obstacle Avoidance for Mobile Robots》论文时候的笔记,感兴趣的欢迎去看原论文。 VFH中有一些概念是从其他算法中借鉴过来的,并且VFH算法本身就是对VFF(Virtural Force Field)的一种改进,其中有很多的相似之处。所以按照原论文的思路,先介绍由CMU提出的Certainty Grid算法中的一些概念,再介绍一下势场法中的一些概念,接着介绍一下VFF

qq_41845878的博客 8122

AI绘画变现新思路:用Stable Diffusion v1.5 接单做Logo与插画设计

本文介绍了如何在星图GPU平台上自动化部署stable-diffusion-v1-5-archive镜像,并将其应用于AI绘画变现。该平台能快速搭建Stable Diffusion v1.5环境,用户可高效生成Logo与商业插画设计草稿,结合人工精修后交付,为设计工作流提供强大助力。

weixin_29009401的博客 71

「UG/NX」BlockUI 树列表(回调函数)

官方对树控件提供了21种回调函数,树的一些操作可以在这些回调函数中进行操作。

何曾参静谧的博客 1334

GEE APP:时间序列影像批处理工具:按月筛选与智能导出解决方案出工具

本文介绍了一个基于Google Earth Engine(GEE)开发的智能时序影像处理工具,可高效处理遥感影像时间序列数据。该工具采用三栏式交互布局,包含控制面板、地图显示和缩略图预览区域。核心功能包括:1)灵活的时间筛选机制,支持年度范围选择和月份批量选择;2)智能影像筛选算法,基于云量、空间覆盖等条件自动选择最佳影像;3)交互式缩略图预览,支持点击加载完整影像;4)自动化批量导出系统,实现标准化命名和统一存储。工具可广泛应用于农业监测、城市扩张研究、生态环境评估等领域,显著提高遥感数据预处理效率,确保

此星光明博客 116

【建议收藏】Midjourney&SD通用提示词库:200+高变现风格一键套用

Stable Diffusion提示词(Prompt)是与AI沟通的核心指令,通过精准的文字描述控制生成图像的风格、内容和细节。 提示词通常包含主体(如"赛博朋克少女")、细节(如"机械义肢,霓虹光影")、风格(如"虚幻引擎渲染")和画质(如"8K超清")四个维度。

2401_84815950的博客 652

8、内存交织技术详解

本文详细解析了内存交织技术的基本原理、工作机制及实现方式,探讨了其在提升内存访问速度和系统性能中的关键作用。文章还分析了内存交织的优缺点、实际应用场景以及与其他优化技术的结合应用,并提出了未来发展的可能方向,为理解与运用该技术提供了全面参考。

g9h0i1的博客 553

AIGC技术解析:从生成式AI原理到主流工具实战应用

生成式人工智能是当前人工智能领域的前沿技术,其核心原理基于深度学习和神经网络模型。从技术原理上看,它主要通过大语言模型和扩散模型等架构,学习海量数据中的模式与规律,从而实现对文本、图像、音频等多模态内容的生成。这项技术的价值在于大幅降低了内容创作的门槛,将专业级的内容生产能力赋予普通用户,推动了创意产业的民主化。在应用场景上,AIGC已广泛应用于营销文案生成、视觉设计、代码辅助、音频制作等领域,成为提升工作效率的重要工具。理解AIGC的底层机制,尤其是提示词工程和模型微调等关键技术,能帮助用户更有效地驾驭如

weixin_30650039的博客 502

前言:关于作者吴秋生博士与此书简介

博士现为田纳西大学,诺克斯维尔分校,地理系的副教授。他的研究兴趣包括地理信息科学(GIS)、遥感和环境建模。更具体地说,对应用地理空间大数据、机器学习和云计算(例如,谷歌地球引擎、微软行星计算机)来研究环境变化,特别是地表水和湿地淹没动态。吴博士是开放科学和可重复研究的倡导者。他开发了几个用于高级地理空间分析的开源软件包(例如,吴博士还在YouTube上发布了数百个有关GIS和地图绘制的视频。更多有关他的开源项目信息,请访问GitHub(查看他的YouTube频道。.....................

韩天放 6099

IMSL CNL 7.0.0 (x86-64)Crack

IMSL CNL 7.0.0 (x86-64)Crack intel的算法库破解文件,这是C++版本的破解文件

Local Moondream2赋能设计师:快速获取跨风格视觉表达建议

本文介绍了如何在星图GPU平台上自动化部署Local Moondream2镜像,为设计师提供高效的视觉创意辅助。该工具能自动分析参考图片并生成详细的AI绘画提示词,帮助用户快速实现从视觉灵感向不同艺术风格(如赛博朋克、水彩等)的转化,从而提升设计探索与内容创作的效率。

weixin_42598278的博客 217

TMS_WebGMaps_1.9.8.0_Full_Source

TMS_WebGMaps_1.9.8.0_Full_Source 全源码 delphi cbuilder

上一篇: Stable Diffusion【二次元模型】:最受欢迎的通用二次元大模型AWPainting
下一篇: Stable Diffusion【二次元模型】:对标Midjourney二次元画风的大模型niji-动漫二次元加强版
网络安全-XG
博客等级 码龄5年 1万+粉丝 2752原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值