StoryDiffusion模型介绍
StoryDiffusion 是由字节跳动和南开大学HVision团队开发的创新人工智能工具,专注于生成连贯的图像与视频故事,尤其擅长漫画创作。它采用先进的一致性自注意力技术,无需额外训练即可产出风格统一、角色连贯的图像序列,轻松构建引人入胜的故事情节,其即插即用、高效稳健的特性,让创意表达更加自由流畅,为用户提供了创作漫画等内容的便捷工具。
启动应用
首先,进入星海智算平台,点击【GPU实例】,即可创建实例。
在【选择配置】中,可选择不同区域的显卡。
在【镜像市场】点击更换镜像,选择StoryDiffusi-on镜像,确认后在实例创建页面点击<立即创建>即可。
创建成功等待4-5分钟,看到<运行中>即可开始使用,点击应用链接即可跳转到对应的WebUI。
镜像操作
待程序打开后呈现的就是StoryDiffusion主页面
01首先,在Textual Description for Charactery【角色的文字描述】下栏中输入关键事物的描述词,例如输入a girl,wearing white shirt,black skirt,black tie,yellow hair【一个女孩,穿着白衬衫,黑裙子,黑领带,黄头发】
02其次,在Negative_prompt【负面提示】下栏中输入反向提示词,例如输入bad anatomy,bad hands,missing fingers,extra fingers,three hands, three legs,bad arms,missing legs,missing arms,poorly drawn face, bad face,fused face,cloned face,three crus,fused feet, fused thigh,extra crus,ugly fingers,horn,cartoon, cg,3d, unreal,animate,amputation,disconnected limbs【糟糕的解剖结构,坏手,缺失的手指,多余的手指,三只手,三条腿,坏的手臂,缺失的腿,缺失的手臂,画得不好的脸,坏脸,融合的脸,克隆的脸,三条小腿,融合的脚,融合的大腿,多余的小腿,丑陋的手指,角状物,卡通,计算机生成图像,3D,虚幻,动画,截肢,断开的肢体】
03接着,在 Comic Description (each line corresponds to a frame)【漫画描述(每行对应一帧)】下栏中输入漫画故事的描述词,注意每一行就是对应一个情节,这样才能对每一张漫画进行详细描绘。
04最后,点击下方的 Generate【生成】,稍等片刻,就能根据描述词在右上方框格内生成一系列连贯的漫画。
页面下方提供了五个样例,可以自行选择感兴趣的样例,不需要输入描述词,也不用调整参数,点击生成即可获得对应的系列漫画!本文以样例五示例,感兴趣的小伙伴快来星海智算平台试试~