来源:优设推荐:@夏花生 发布时间:2023-07-18 学习时间:阅读约10分钟
大家好,这里是和你们一起探索 AI 绘画的花生~
之前为大家出了一期制作风格化二维码的教程,是用 Stable Diffusion WebUI 加上 controlnet 插件在黑白方块中融入插画。不过很快这种二维码就发展出更神奇的样式——黑白色块完全融入到画面中,第一眼根本看不出,但是依旧可以被手机扫描和识别。而达到这样的效果只需要一个新的 controlnet 模型 QR code monster,今天展示一下具体的制作过程。
QR Toolkit 网页版: https://qrcode.antfu.me/
QR Toolkit 插件 git 网址: https://github.com/antfu/sd-webui-qrcode-toolkit
插件功能介绍:Refining AI Generated QR Code (antfu.me)
QR Toolkit 是一个 WebUI 插件,也有网页版,功能非常全面,可以生成多种样式的美化 QR 码,它具体安装步骤如下:
- 进入 WebUI 后打开「扩展」界面,点击「从网址安装」
- 复制插件的 git 网址: https://github.com/antfu/sd-webui-qrcode-toolkit.git ,粘贴到“扩展的 git 仓库网址”一栏。
- 点击安装,等待安装完成,然后重启 WebUI。
安装完成后,点击进入 QR Toolkit 界面,开始生成二维码。二维码的样式和细节直接影响最终图像的生成效果,设置正确的参数有助于生成更好用的二维码。QR Toolkit 的操作步骤及相关参数介绍如下,你也可以直接使用图中我的参数作为参考。设置完毕后,点击「Download」将二维码保存到本地。
- 填写链接:将你想制作成二维码的链接填入文本框,链接不要太长。太长的话建议使用工具转换为短链接: 百度短网址 (dwz.cn)
- 容错率(Error Correction):二维码的抗损毁能力,可以让二维码在部分区域损毁的情况下,也可以被识别。数值越高,抗损毁能力越强,但也有更多的信息冗余。为了保证二维码变成图像后依旧被识别,这里建议选择 Q 或 H 两档中的一个。
- Boost ECC:直接勾选
- 遮罩图案(Mask Pattern):二维码样式,可以逐个对比查看,选择黑白点分布比较均匀的样式。 不要选择一块特别密集一块特别稀疏的样式,会导致生成的图像构图很奇怪。
- 旋转(Rotate):对二维码进行旋转。可以将二维码中 3 个非常显眼的定位方块旋转调整到画面下方,在生成图想时更容易被隐藏起来。
- 风格(style):调整二维码风格细节,点阵由方方正正变成更圆润连贯的外形,建议选择第二种风格。
- Markers/Sub Markers:调整点阵细节,还是以”黑白分布均匀”为基准进行微调。其中 Marker Inner 决定 3 个非常显眼的定位方块的外形,最好选择第一种,保证生成的图像在微信中能被直接识别
- Margin(白边):在二维码边缘添加噪点,让二维码的形式感弱化。推荐设置 3-5,太高在微信中会难以识别。
- Effect(特效):有 Crystallize (晶格化)和 Liquidify(液化)两种特效,可以修改黑白方块之间的分明的界限,可以让生成的图像更自然,熟练后可以尝试使用。
插件 git 网址: https://github.com/Bing-su/adetailer
这是一款非常强大的、专门针对人脸进行修复的插件,可以解决生成全身图时人物面部扭曲/模糊的问题,安装方式和前面一样。
插件 After Detailer 界面
模型下载地址: https://huggingface.co/monster-labs/control_v1p_sd15_qrcode_monster/tree/main (附件有打包资源)
QR Code Monster 是专门为生成艺术二维码而训练的一款 Controlnet 模型,下载完成后,将模型复制到 WebUI 根目录的 Extensions → Controlnet → models 文件夹内,然后重启 WebUI。
上面的内容都准备好之后,就可以开始生成操作了,下面是我使用的参数,大家可以作为参考
- 大模型:SHMILY 古典炫彩_v1.0(大模型选一个自己常用的就行,建议优先用插画风大模型,更方便和二维码融合,等熟练之后再用写实风格模型或者与 lora 模型结合使用)
- 正面提示词:(masterpiece, top quality, best quality, 1 girl, full body, flowers(画面中有建筑、街道这些元素成功率会更高)
- 负面提示词:((nsfw)), (worst quality, low quality:2) , ng_deepnegative_v1_75t, EasyNegative, badhandv4 (文末可下载 embedding 模型打包资源)
- 步数:50
- 采样器:DPM++ 2M SDE Karras
- CFG scale: 7
- 尺寸:512*512 px
- 开启高清修复(Hires.fix):参数默认即可
然后启用 After Detailer 插件,模型选择 face_yolov8n.pt 或者 mediapipe_face_full,在「蒙版处理」中将第三项的数值设置为 -4。
启用 Controlnet 插件,上传我们准备好的二维码,勾选完美像素模式,其他参数设置如下:
- 预处理器:无 / 模型:control_v1p_SD15_QRcode_monster
- 控制权重:1.0 – 1.75(数值越高,二维码的影响越强,识别成功率越高)
- 引导接入时机:0 – 0.1
- 引导终止时机:0.8-0.9
- 控制模式:均衡
- 缩放模式:缩放后填充空白
参数都设置好之后,就可以点击「生成」按钮进行抽卡了。图像生成后,可以然后在手机上检测二维码能否被直接识别;如果不能,就灵活调整控制权重、引导接入/终止时机的 3 项数值,同一个数值可以多生成几张,确定没有可用图像后,再调整参数。
(图像生成后,原始图像全尺寸较大,记得缩小至原来的一半或者三份之一,在手机上直接识别成功的概率会更高)
最后结果:
以上就是利用 Stable Diffusion WebUI 配合 Controlnet 新模型 QR Code Monster,制作无痕 AI 艺术二维码的相关教程,喜欢本期推荐的话记得点赞收藏支持一波,之后会继续为大家推荐更多实用的 AI 绘画干货内容。
文中提到的相关模型资源已经打包好,可以直接文末下载使用。也欢迎大家扫描下方的二维码加入“优设 AI 绘画交流群”,和我及其他设计师一起交流学习 AI 知识~
参考资料:
- https://antfu.me/posts/ai-qrcode-101#method-a-text-to-image-with-controlnet
- https://www.bilibili.com/video/BV1zF411R7xg/?spm_id_from=333.999.0.0&vd_source=7e86aff88430dc49c39de082d6a0f147
- https://www.bilibili.com/video/BV1zF411R7xg/?spm_id_from=333.999.0.0&vd_source=7e86aff88430dc49c39de082d6a0f147
- https://www.bilibili.com/video/BV1Lh411A76E/?spm_id_from=333.999.0.0&vd_source=7e86aff88430dc49c39de082d6a0f147
发评论,每天都得现金奖励!超多礼品等你来拿
登录 在评论区留言并审核通过后,即可获得现金奖励,奖励规则可见: 查看奖励规则