绘画教程 第5章 Stable Diffusion图生图

05第5章StableDiffusion图生图目录CONTENTS15.1图生图概述2

5.2图生图主要模式3

5.3图生图实例45.4本章小结5.1图生图概述5.1.1图生图界面StableDiffusion的图生图功能允许用户输入一张图片，并通过添加文本描述的方法输出修改后的新图片。可以将图生图简单理解为文生图的升级版。在文生图模式下，StableDiffusion全部使用文字描述生成图片；而在图生图模式下，StableDiffusion使用“提示词+参考图”共同生成图片。

打开StableDiffusion软件，单击“图生图”标签，即可进入“图生图”模式，如图5-1所示。5.1图生图概述5.1.2缩放模式

当用户上传的参考图尺寸与设置的新图尺寸不一致时，可以通过“缩放模式”来选择图片处理模式，以使出图效果更加合理。4种缩放模式：（1）“仅调整大小”模式。（2）“裁剪后缩放”模式。（3）“缩放后填充空白”模式。（4）“调整大小（潜空间放大）”模式。图5-3转换前的图片5.1图生图概述5.1.3“重绘幅度”参数

“重绘幅度”参数主要用于控制在图生图过程中重新绘制图像时的强度，较小的参数值会生成较为柔和、逐渐变化的图像效果；而较大的参数值则会产生变化更加强烈的图像效果。

当重绘幅度值低于0.5时，新图比较接近于原图；当重绘幅度值超过0.7时，AI的自由创作力度就会变大。因此，用户可根据实际需要调整“重绘幅度”数值，以达到预想的特定效果。5.1图生图概述5.1.4图生图应用

图生图常见的使用场景有：动漫转真人或真人转动漫；人物换装、换脸、换背景；线稿转动漫；宠物转动漫等。图5-6为动漫转真人的生成效果。5.2图生图主要模式5.2.1“图生图”模式

打开StableDiffusion软件，单击“图生图”标签，系统默认打开的是下方“生成”面板中的“图生图”选项卡，用户即可利用“图生图”模式进行AI绘画，其操作步骤主要如下：（1）上传参考图。

选择“图生图”选项卡，二级选项卡也选择“图生图”，拖曳一张图片，将其上传到图像放置区。（2）选择大模型。（3）输入提示词。（4）设置参数。（5）生成图像。

由上可知，基本的“图生图”操作步骤与“文生图”大致相同，区别仅在于“图生图”需要上传一张参考图片。5.2图生图主要模式5.2.2“涂鸦”模式

“涂鸦”是一种较为高级的图生图方法，用户可以使用“涂鸦”模式，在涂抹区域按照指定的提示词生成自己想要的部分图像，从而更加自由地创作和定制图像。

应用“涂鸦”模式前后的效果对比如图5-11所示，本例主要是通过“涂鸦”模式为图中的年轻女子添加了一副眼镜。5.2图生图主要模式

使用“涂鸦”模式进行局部绘图的步骤：（1）上传图片。在“图生图”页面中单击“涂鸦”选项卡，单击中间区域，上传一张原图。（2）进行涂鸦。

上传图片后，在“涂鸦”页面右侧即出现五个小按钮，可以对涂鸦过程进行控制，其中最常用的就是“使用画笔”和“选择画笔颜色”两个按钮。本例中设置画笔颜色为黑色，并设置好画笔粗细，然后即可用鼠标在图片相应位置进行涂抹。（3）选择大模型，输入提示词。（4）设置参数。（5）生成图像。5.2图生图主要模式5.2.3“局部重绘”模式

“局部重绘”能够针对图像的局部区域进行重新绘制，从而生成各种创意性的图像效果。“局部重绘”模式可以应用到许多场景，例如，只修改图像中的人物脸部特征，从而实现人脸交换或面部修改等操作。5.2图生图主要模式

使用“局部重绘”模式给人物换脸的操作步骤：

（1）上传图片。在“图生图”页面中单击“局部重绘”选项卡，单击中间区域，上传一张原图。

（2）进行局部重绘。

上传图片后，在“局部重绘”页面右侧即出现四个小按钮，可以对局部重绘过程进行控制，单击“使用画笔”按钮，设置好画笔粗细，然后即可用鼠标在人物面部进行涂抹，创建相应的蒙版区域。

（3）选择大模型，输入提示词。（4）设置参数。（5）生成图像。5.2图生图主要模式5.2.4“涂鸦重绘”模式

“涂鸦重绘”其实就是“涂鸦+局部重绘”的结合体，它可使用户在不改变整张图片的情况下，实现更精准地对多个元素进行修改的效果。例如，使用该模式可以更换人物头发的颜色。5.2图生图主要模式用“涂鸦重绘”更换头发颜色的操作方法：（1）上传图片。

进入“图生图”页面，切换至“涂鸦重绘”选项卡，单击中间区域，上传一张原图。（2）进行涂鸦重绘。

上传图片后，在“涂鸦重绘”页面右侧即出现五个小按钮，可以对“涂鸦重绘”过程进行控制。单击“选择画笔颜色”按钮，设置画笔颜色；单击“使用画笔”按钮，设置好画笔粗细；然后即可用鼠标在人物头发区域进行涂抹，创建相应的棕色蒙版区域，效果如图所示。（3）选择模型，输入提示词。

（4）设置参数。

在参数面板中设置“蒙版透明度”为60，“重绘区域”为“仅蒙版区域”，其余参数采用默认值。

（5）生成图像。5.2图生图主要模式5.2.5“上传重绘蒙版”模式在“上传重绘蒙版”模式，用户可以用Photoshop等图像处理软件绘制好蒙版，上传以后即可进行重绘，如此操作将比“涂鸦重绘”模式更加精准和便捷。使用该模式可以很方便地更换图片中的某些元素或背景，如产品图片的背景等。5.2图生图主要模式

使用“上传重绘蒙版”模式更换产品背景的操作方法：

（1）上传图片。在“图生图”页面中切换至“上传重绘蒙版”选项卡，在中间图像区域分别上传一张原图和一张蒙版图，如图5-19所示。

（2）参数设置。

在页面下方的“蒙版模式”选项区中，确保选中“重绘蒙版内容”单选按钮，需要注意的是，“上传重绘蒙版”和“局部重绘”模式不同，“上传重绘蒙版”中的白色区域代表重绘区域，黑色区域保持原样，因此此处务必要选中“重绘蒙版内容”单选按钮。（3）选择模型，输入提示词。（4）生成图像。5.2图生图主要模式5.2.6“批量处理”模式

“批量处理”的功能是能够同时处理多张上传的蒙版并重绘图像。在使用该模式时，用户需要先设置好输入目录、输出目录等路径，如图5-20所示。批量处理工作原理与“上传重绘蒙版”模式基本相同。

需要注意的是，输入目录、输出目录等路径中不能有任何中文或者特殊字符，否则软件会出现报错情况，并且所有原图和蒙版的文件名称需要保持一致。

当用户设置好参数之后，即可一次性重绘多张图片，能够极大地提高局部重绘的效率。5.3图生图实例

本节将利用“涂鸦重绘”模式，完成对模特上衣颜色的更换。具体操作步骤如下：

（1）“涂鸦重绘”。

单击“涂鸦重绘”选项卡，在图片区域上传模特图，调整“选择画笔颜色”为橙色，单击“使用画笔”工具，调整画笔粗细，然后用画笔涂抹模特上衣区域。

（2）参数设置。在参数面板中，设置“蒙版边缘模糊度”为2；选择“重绘区域”为“仅蒙版区域”，“采样方法”默认，“迭代次数”为30，单击“从图生图自动检测图像尺寸”按钮，得到图像尺寸，“宽度”为512，“高度”为768，其余参数默认。

（3）输入提示词。

（4）生成新图像。5.4本章小结

本章全面介绍