【零绘画基础程序员必学】AI绘画入门笔记02—SD应用

【零绘画基础程序员必学】AI绘画入门笔记02—SD应用

上一节已经介绍了SD的入门基础，其实AI绘画并没有想象中那么复杂，但实际上手后总会发现很难达到预期，这就需要多看优秀的作品以及勤加练习。本节继续介绍几个最常用的SD使用技巧，为下一节了解 ComfyUI 做个铺垫。

1. 超高清放大(Tiled Diffusion & VAE)

在上一节已经讲过多种SD中放大图片的方法，此处再推荐一种通过一款扩展插件实现超高清放大高效的方式。

首先需要安装扩展，搜索：TiledDiffusion。在图生图中使用该插件，通过对低分辨率图像分块绘制方式放大图像，效果好、效率高、可控性强，且能有效优化显存利用。安装后图生图界面会多出两个选项卡，Tiled Diffusion 负责扩散生成图像，Tiled VAE 负责编码与解码。

新手参数设置推荐：

1. 为避免出现过多新元素，图生图重绘幅度建议设置低一些，如 0.3;
2. Tiled Diffusion 的方案选项中 MultiDiffusion 更常用;
3. Overlap 重叠区域设置，使用 MultiDiffusion 时选择 32 或 48，使用 Mixture of Diffusion 时选择 16 或 32 效率较高;
4. 放大算法，真实系首选 R-ESRGAN 4x+，二次元首选 R-ESRGAN 4x+ Anime6B;
5. Tiled VAE 设置分块大小可以有效降低显存，使用默认设置即可，当提示显存不足时可以尝试降低编码器分块大小，当颜色和清晰度不正常时可以勾选快速编码器颜色修复;
6. TileSize 区块大小设置，维持宽高相等，设置边长在 64-160 之间的正方形即可，建议设置 96 或 128;

2. ControlNet进阶应用: AI艺术字

AIGC生成艺术字是很常见的场景，如果直接使用提示词，很难实现想要的效果，并且难以支持中文艺术字，借助 ControlNet 结合 "文字图" 即可轻松实现。

核心思路: 使用 ControlNet + 提示词生成AI材质艺术字，效果图见后。

2.1 操作步骤

Step1: 利用ps等工具生成白底黑字的"文字图"，如下图左下角所示;

Step2: 在 ControlNet 中导入图片，设置 depth 模型和 depth_midas 预处理器;

Step3: 选择大模型、书写提示词、配置参数、生成图片;

# 正向提示词demo
grass, flower, brick, stairway, from above, high quality, highres, masterpiece, solid background
# 反向提示词demo
(worst quality:2), (low quality:2), (normal quality:2), lowres, watermark, monochrome

2.2 材质提示词推荐

# demo1
gold, golden, glim, reflection
# demo2
crystal, transparent, luminous
# demo3
book, paper, pages, film, list, postcard, bookmark, stamp
# demo4
flower, dappled sunlight, bunch of flowers, outdoors, grasslands

2.3 ControlNet 控制参数解析

核心思路: 通过 预处理器 和 模型 参数改变AI"读取"文字信息的方式。

参数推荐:

• 控制权重: 0.5 ～ 1
• 引导介入/终止时机：控制自由度，默认0～1，建议范围控制在 0.05～0.2 之间

3. AI 摄影: 大模型+LoRA

AIGC另一大应用是可以直接生成逼真的摄影作品，既然提及摄影，关键在于 "真"，因此需要选择真实系大模型并对人物肖像做美颜处理，还可以实现胶片风等滤镜效果。

核心思路: 真实系人像大模型 + LoRA美颜滤镜

• 真实系人像大模型推荐：

majicMIX realistic 麦橘写实：https://civitai.com/models/43331/majicmix-realistic

DreamShaper：https://civitai.com/models/4384?modelVersionId=128713

A-Zovya Photoreal：https://civitai.com/models/57319?modelVersionId=474400

• 美颜 LoRA 滤镜推荐

Cute Girl Mix

Fashion Girl

GirlFriendMix

LEOSAM 胶片风与拍立得

4. 打通PS插件, PS+SD=PSD?

对于熟悉ps的朋友，一定希望能在PS中使用AIGC，遗憾的是，国区的ps并不能直接使用adobe官方的ai生图能力，但可以借助插件实现在 ps 中丝滑地使用SD或ComfyUI，可以借助下面这款插件：

https://github.com/AbdullahAlfaraj/Auto-Photoshop-StableDiffusion-Plugin

首先需要在SD设置中启用api，安装完插件后就可以在ps中的选区中结合插件使用sd了。

不过随着 ComfyUI 逐步取代 SD，建议直接在 PS 种打通 ComfyUI 来玩耍 AIGC，在后面章节会进行介绍。