【零绘画基础程序员必学】AI绘画入门笔记02—SD应用
上一节已经介绍了SD的入门基础,其实AI绘画并没有想象中那么复杂,但实际上手后总会发现很难达到预期,这就需要多看优秀的作品以及勤加练习。本节继续介绍几个最常用的SD使用技巧,为下一节了解 ComfyUI 做个铺垫。
1. 超高清放大(Tiled Diffusion & VAE)
在上一节已经讲过多种SD中放大图片的方法,此处再推荐一种通过一款扩展插件实现超高清放大高效的方式。
首先需要安装扩展,搜索:TiledDiffusion
。在图生图中使用该插件,通过对低分辨率图像分块绘制方式放大图像,效果好、效率高、可控性强,且能有效优化显存利用。安装后图生图界面会多出两个选项卡,Tiled Diffusion
负责扩散生成图像,Tiled VAE
负责编码与解码。
新手参数设置推荐:
-
为避免出现过多新元素,图生图重绘幅度建议设置低一些,如 0.3;
-
Tiled Diffusion
的方案选项中MultiDiffusion
更常用; -
Overlap 重叠区域设置,使用
MultiDiffusion
时选择 32 或 48,使用Mixture of Diffusion
时选择 16 或 32 效率较高; -
放大算法,真实系首选
R-ESRGAN 4x+
,二次元首选R-ESRGAN 4x+ Anime6B
; -
Tiled VAE 设置分块大小可以有效降低显存,使用默认设置即可,当提示显存不足时可以尝试降低编码器分块大小,当颜色和清晰度不正常时可以勾选快速编码器颜色修复;
-
TileSize 区块大小设置,维持宽高相等,设置边长在 64-160 之间的正方形即可,建议设置 96 或 128;
2. ControlNet进阶应用: AI艺术字
AIGC生成艺术字是很常见的场景,如果直接使用提示词,很难实现想要的效果,并且难以支持中文艺术字,借助 ControlNet 结合 "文字图" 即可轻松实现。
核心思路: 使用 Co
2.1 操作步骤
Step1: 利用ps等工具生成白底黑字的"文字图",如下图左下角所示;
Step2: 在 ControlNet 中导入图片,设置 depth 模型和 depth_midas 预处理器;
Step3: 选择大模型、书写提示词、配置参数、生成图片;
# 正向提示词demo
grass, flower, brick, stairway, from above, high quality, highres, masterpiece, solid background
# 反向提示词demo
(worst quality:2), (low quality:2), (normal quality:2), lowres, watermark, monochrome
2.2 材质提示词推荐
# demo1
gold, golden, glim, reflection
# demo2
crystal, transparent, luminous
# demo3
book, paper, pages, film, list, postcard, bookmark, stamp
# demo4
flower, dappled sunlight, bunch of flowers, outdoors, grasslands
2.3 ControlNet 控制参数解析
核心思路: 通过 预处理器 和 模型 参数改变AI"读取"文字信息的方式。
效果 | 预处理器 | 模型 |
---|---|---|
物质汇聚成材质形体 | depth_midas/invert | depth |
凹陷镂空文字 | none | depth |
清晰文字融入画面 | canny/lineArt(standard) | canny/lineArt |
纤细艺术字(艺术性发挥) | invert | scribble |
参数推荐:
- 控制权重: 0.5 ~ 1
- 引导介入/终止时机:控制自由度,默认0~1,建议范围控制在 0.05~0.2 之间
3. AI 摄影: 大模型+LoRA
AIGC另一大应用是可以直接生成逼真的摄影作品,既然提及摄影,关键在于 "真",因此需要选择真实系大模型并对人物肖像做美颜处理,还可以实现胶片风等滤镜效果。
核心思路: 真实系人像大模型 + LoRA美颜滤镜
- 真实系人像大模型推荐:
majicMIX realistic 麦橘写实:https://civitai.com/models/43331/majicmix-realistic
DreamShaper:https://civitai.com/models/
A-Zovya Photoreal:https://civitai.com/models/57319?modelVersionId=474400
- 美颜 LoRA 滤镜推荐
Cute Girl Mix
Fashion Girl
GirlFriendMix
LEOSAM 胶片风与拍立得
4. 打通PS插件, PS+SD=PSD?
对于熟悉ps的朋友,一定希望能在PS中使用AIGC,遗憾的是,国区的ps并不能直接使用adobe官方的ai生图能力,但可以借助插件实现在 ps 中丝滑地使用SD或ComfyUI,可以借助下面这款插件:
https://github.com/AbdullahAlfaraj/Auto-Photoshop-StableDiffusion-Plugin
首先需要在SD设置中启用api,安装完插件后就可以在ps中的选区中结合插件使用sd了。
不过随着 ComfyUI 逐步取代 SD,建议直接在 PS 种打通 ComfyUI 来玩耍 AIGC,在后面章节会进行介绍。