一些文章资料

• 高清修复相关：https://exp-blog.com/ai/sd-ru-men-06-gao-qing-xiu-fu/
• 真人转动漫：https://www.uisdc.com/stable-diffusion-27

AI 相关能力

生成 animation 方式

1. extension 安装 AnimateDiff 插件，下载链接：https://gitcode.com/mirrors/continue-revolution/sd-webui-animatediff.git。
2. 下载对应 animeDiff 的模型，可以选一个：https://hf-mirror.com/guoyww/animatediff/tree/main。一般新手用 sd_v14就好了。

生成瞬息宇宙效果（多图场景切换）

Deforum

1. 安装 Deforum 插件，extension 里搜就好了。
2. 安装模型到 sd 根目录下 models/Deforum 下：
   • dpt_large-midas-2f21e586.pt
   • AdaBins_nyu.pt

animediff

参考教程：https://ui.marklion.cn/article/7e7/12/article-9ec5897e727c491d.shtml

图片 ai 换脸

1. 使用秋叶的整合包
2. 安装Visual Studio
   • 勾选 asp.net和web开发、Azure 开发、Python开发、.net桌面开发、使用 c++ 的桌面开发
3. 将下载好的inswapper_128.onnx模型放到SD根目录\models\roop，没有就新建一个
4. 配置秋叶代理
5. 进入秋叶整合包根目录\py310\Scripts，双击运行accelerate.exe激活虚拟环境。
6. 安装insightface，在Scripts目录右键打开终端，如果右键没有终端，就在文件地址栏输入cmd，打开控制台。执行 pip install insightface==0.7.3
7. 打开web-ui，转到”扩展“选项卡，然后”从URL安装“选项卡中输入以下URLhttps://github.com/s0md3v/sd-webui-roop，点击安装。
8. 重启

图片和文字/二维码融合

BrightNess（亮度）模型

基于信息图改变图片内部的亮度分布，实现特定形体的植入。

定义：一种视觉感觉的属性，该属性决定了一个区域似乎发出更多/更少的光，从而呈现出更亮或更暗

模型下载链接：https://huggingface.co/spinosorus/control_v1p_sd15_brightness/tree/main

技巧：推荐权重大致 0.5左右，开始0.1,结束0.8，可适当调整

Illumination (明度) 模型

基于信息图改变图片内部的明暗分布，实现特定形体的置入。

链接：https://huggingface.co/ddoanlinh/controlnet_illumination/tree/main

技巧：推荐权重大致 0.8左右，开始0.1,结束0.8

二维码融合

模型链接：https://huggingface.co/monster-labs/control_v1p_sd15_qrcode_monster/tree/main

推荐结合 Illumination 进行明暗度调整，然后再配合二维码

配置：权重1.3，开始 0.11，结束，0.83

角色背景重绘

• 首先借助 rombg 插件，在后期处理里把角色抠出来
• 然后放到蒙版中，选择重绘非蒙版区域，并对蒙版区域选择填充（跟背景风格更贴近），或空白浅空间（会跟角色对比反差比较大）
• 使用 Controlnet 局部重绘，可以帮助加强重绘的区域和重绘区外的关联度，让图过渡更自然，不需要上传独立图片，勾选一个完美像素，预处理器选择全局和谐（Inpaint_Global_Harmonious），这样生成出来的图片会在构图上尽可能照顾已有人物的形象。
• 如果想要直接指定具体的背景，可以再开一个 controlnet 也用 lineart 来进行预处理，把背景图上传上去，这样就能做到更好的融合了。