Stable Diffusion(四)图生图
Published in:2023-07-20 | category: Stable Diffusion

前段时间有一个风靡全网的真人转漫画风格,受到了大家的喜欢

而在SD里,就可以通过图生图来实现类似的效果

当然图生图还有更好玩的应用,我们一点一点来探索

首先我们来简单进行一下图生图的这一个实践—真人转动漫

1. 图生图基本界面

和文生图基本界面差不多,多了一个上传图像区

image-20230817104804853 2.图生图步骤

2.1 导入图片

准备一张真人图像

Snipaste_2023-08-18_22-20-40

导入有两种方式

(1)点击上传图像区,打开资源管理器选取

(2)直接将图片拖拽到上传图像区

2.2 写提示词

提示词很重要,也需要提示词的准确

用自然语言描述一下我们的画面内容,一开始我们可以偷个懒,就写一个

1man即可

再把我们的固定模板加上

正面提示词后添加:
SFW, (masterpiece:1,2), best quality, masterpiece, highres, original, extremely detailed wallpaper, perfect lighting,(extremely detailed CG:1.2),

负面提示词后添加:
NSFW, (worst quality:2), (low quality:2), (normal quality:2), lowres, normal quality, ((monochrome)), ((grayscale)), skin spots, acnes, skin blemishes, age spot, (ugly:1.331), (duplicate:1.331), (morbid:1.21), (mutilated:1.21), (tranny:1.331), mutated hands, (poorly drawn hands:1.5), blurry, (bad anatomy:1.21), (bad proportions:1.331), extra limbs, (disfigured:1.331), (missing arms:1.331), (extra legs:1.331), (fused fingers:1.61051), (too many fingers:1.61051), (unclear eyes:1.331), lowers, bad hands, missing fingers, extra digit,bad hands, missing fingers, (((extra arms and legs))),

2.3参数设置

图生图参数设置和文生图差不多

有一个比较独特的就是下面的重绘幅度

重绘幅度 ,通俗理解就是他跟原图有多像

一般我们为了实现这种图生图效果,会降低一些重绘幅度,维持在6-8之间即可,太低或太高都不太好

图像设置宽高,一般和我们输入图像大小保持一致

​ 如果输入图像太大,显存吃不消,那么我们至少保证比例一致,比如原图是3000*3000像素,那么我们就等比例缩放到1024 *1024

采样方法选择DPM++2Mkarras

其他选择和图生图一样,可以维持默认不变

image-20230818224818756

点击生成就可以生成

123

但是发现差别还是蛮大的,原因是我们内容提示词对人物描述不够

我们把1man 换成 1man,Stay in sunglasses, short beard,put hands in pants pockets,,sit by the window,outdoors, looking at viewer,shirt,suits,short hair,Blue jeans

多了更多的服饰,面部细节等的描述,再点击生成

00062-262499971-1man,Stay in sunglasses, short beard,put  hands in pants pockets,,sit by the window,outdoors,  looking at viewer,shirt,suits,sho

整体会好多了

3. 巧用随机种子

如果我们对这个人物整体很满意了,但是一些细节还想微调,我们就要用到随机种子了

在图片生成区下方,可以查看随机种子

image-20230818230647705

然后把我们的随机种子从-1改为262499971

这时候我们点击生成,会发现生成的图片几乎和之前的一模一样,不论你点多少次

然后这时候我们对自己不满意的提示词进行微调,如让男主穿牛仔裤,看向镜头等,再点击生成即可

00074-262499971-1man,(Blue jeans_1.1),(black suits_1.1),Stay in sunglasses, short beard,put  hands in pants pockets,,sit by the window,outdoors,

4. 拓展应用

动漫转真人,真人转动漫都是比较好玩的

当然除了这些,我们还可以把一张本来不是真人的物体,用真人的提示词去进行拟人化

除此之外还可以

将随机涂鸦的场景转换为好看的动漫风格图片

其他关于图生图进阶用法,我们会在另外的文章里讲到

Prev:
Stable Diffusion(六)局部重绘
Next:
Stable Diffusion(三)AI绘画模型基础