使用AI魔法秒变艺术二维码达人,附详细图文教程
来源:优设推荐:@夏花生  发布时间:2023-07-18  学习时间:阅读约10分钟

大家好,这里是和你们一起探索 AI 绘画的花生~

之前为大家出了一期制作风格化二维码的教程,是用 Stable Diffusion WebUI 加上 controlnet 插件在黑白方块中融入插画。不过很快这种二维码就发展出更神奇的样式——黑白色块完全融入到画面中,第一眼根本看不出,但是依旧可以被手机扫描和识别。而达到这样的效果只需要一个新的 controlnet 模型 QR code monster,今天展示一下具体的制作过程。

一、安装 QR Toolkit 插件

QR Toolkit 网页版: https://qrcode.antfu.me/

QR Toolkit 插件 git 网址: https://github.com/antfu/sd-webui-qrcode-toolkit

插件功能介绍:Refining AI Generated QR Code (antfu.me)

QR Toolkit 是一个 WebUI 插件,也有网页版,功能非常全面,可以生成多种样式的美化 QR 码,它具体安装步骤如下:

  1. 进入 WebUI 后打开「扩展」界面,点击「从网址安装」
  2. 复制插件的 git 网址: https://github.com/antfu/sd-webui-qrcode-toolkit.git ,粘贴到“扩展的 git 仓库网址”一栏。
  3. 点击安装,等待安装完成,然后重启 WebUI。

使用AI魔法秒变艺术二维码达人,附详细图文教程

二、生成二维码

安装完成后,点击进入 QR Toolkit 界面,开始生成二维码。二维码的样式和细节直接影响最终图像的生成效果,设置正确的参数有助于生成更好用的二维码。QR Toolkit 的操作步骤及相关参数介绍如下,你也可以直接使用图中我的参数作为参考。设置完毕后,点击「Download」将二维码保存到本地。

使用AI魔法秒变艺术二维码达人,附详细图文教程

  1. 填写链接:将你想制作成二维码的链接填入文本框,链接不要太长。太长的话建议使用工具转换为短链接: 百度短网址 (dwz.cn)
  2. 容错率(Error Correction):二维码的抗损毁能力,可以让二维码在部分区域损毁的情况下,也可以被识别。数值越高,抗损毁能力越强,但也有更多的信息冗余。为了保证二维码变成图像后依旧被识别,这里建议选择 Q 或 H 两档中的一个。
  3. Boost ECC:直接勾选
  4. 遮罩图案(Mask Pattern):二维码样式,可以逐个对比查看,选择黑白点分布比较均匀的样式。 不要选择一块特别密集一块特别稀疏的样式,会导致生成的图像构图很奇怪。
  5. 旋转(Rotate):对二维码进行旋转。可以将二维码中 3 个非常显眼的定位方块旋转调整到画面下方,在生成图想时更容易被隐藏起来。
  6. 风格(style):调整二维码风格细节,点阵由方方正正变成更圆润连贯的外形,建议选择第二种风格。
  7. Markers/Sub Markers:调整点阵细节,还是以”黑白分布均匀”为基准进行微调。其中 Marker Inner 决定 3 个非常显眼的定位方块的外形,最好选择第一种,保证生成的图像在微信中能被直接识别
  8. Margin(白边):在二维码边缘添加噪点,让二维码的形式感弱化。推荐设置 3-5,太高在微信中会难以识别。
  9. Effect(特效):有 Crystallize (晶格化)和 Liquidify(液化)两种特效,可以修改黑白方块之间的分明的界限,可以让生成的图像更自然,熟练后可以尝试使用。

三、安装 After DetAIler 插件

插件 git 网址: https://github.com/Bing-su/adetailer

这是一款非常强大的、专门针对人脸进行修复的插件,可以解决生成全身图时人物面部扭曲/模糊的问题,安装方式和前面一样。

使用AI魔法秒变艺术二维码达人,附详细图文教程

插件 After Detailer 界面

四、安装 QR Code Monster 模型

模型下载地址: https://huggingface.co/monster-labs/control_v1p_sd15_qrcode_monster/tree/main (附件有打包资源)

QR Code Monster 是专门为生成艺术二维码而训练的一款 Controlnet 模型,下载完成后,将模型复制到 WebUI 根目录的 Extensions → Controlnet → models 文件夹内,然后重启 WebUI。

使用AI魔法秒变艺术二维码达人,附详细图文教程

五、设置 WebUI 参数

上面的内容都准备好之后,就可以开始生成操作了,下面是我使用的参数,大家可以作为参考

  1. 大模型:SHMILY 古典炫彩_v1.0(大模型选一个自己常用的就行,建议优先用插画风大模型,更方便和二维码融合,等熟练之后再用写实风格模型或者与 lora 模型结合使用)
  2. 正面提示词:(masterpiece, top quality, best quality, 1 girl, full body, flowers(画面中有建筑、街道这些元素成功率会更高)
  3. 负面提示词:((nsfw)), (worst quality, low quality:2) , ng_deepnegative_v1_75t, EasyNegative, badhandv4 (文末可下载 embedding 模型打包资源)
  4. 步数:50
  5. 采样器:DPM++ 2M SDE Karras
  6. CFG scale: 7
  7. 尺寸:512*512 px
  8. 开启高清修复(Hires.fix):参数默认即可

使用AI魔法秒变艺术二维码达人,附详细图文教程

然后启用 After Detailer 插件,模型选择 face_yolov8n.pt 或者 mediapipe_face_full,在「蒙版处理」中将第三项的数值设置为 -4。

使用AI魔法秒变艺术二维码达人,附详细图文教程

六、设置 Controlnet 参数

启用 Controlnet 插件,上传我们准备好的二维码,勾选完美像素模式,其他参数设置如下:

  1. 预处理器:无 / 模型:control_v1p_SD15_QRcode_monster
  2. 控制权重:1.0 – 1.75(数值越高,二维码的影响越强,识别成功率越高)
  3. 引导接入时机:0 – 0.1
  4. 引导终止时机:0.8-0.9
  5. 控制模式:均衡
  6. 缩放模式:缩放后填充空白

使用AI魔法秒变艺术二维码达人,附详细图文教程

七、生成图像

参数都设置好之后,就可以点击「生成」按钮进行抽卡了。图像生成后,可以然后在手机上检测二维码能否被直接识别;如果不能,就灵活调整控制权重、引导接入/终止时机的 3 项数值,同一个数值可以多生成几张,确定没有可用图像后,再调整参数。

(图像生成后,原始图像全尺寸较大,记得缩小至原来的一半或者三份之一,在手机上直接识别成功的概率会更高)

最后结果:

使用AI魔法秒变艺术二维码达人,附详细图文教程

使用AI魔法秒变艺术二维码达人,附详细图文教程

以上就是利用 Stable Diffusion WebUI 配合 Controlnet 新模型 QR Code Monster,制作无痕 AI 艺术二维码的相关教程,喜欢本期推荐的话记得点赞收藏支持一波,之后会继续为大家推荐更多实用的 AI 绘画干货内容。

文中提到的相关模型资源已经打包好,可以直接文末下载使用。也欢迎大家扫描下方的二维码加入“优设 AI 绘画交流群”,和我及其他设计师一起交流学习 AI 知识~

使用AI魔法秒变艺术二维码达人,附详细图文教程

参考资料:

  1. https://antfu.me/posts/ai-qrcode-101#method-a-text-to-image-with-controlnet
  2. https://www.bilibili.com/video/BV1zF411R7xg/?spm_id_from=333.999.0.0&vd_source=7e86aff88430dc49c39de082d6a0f147
  3. https://www.bilibili.com/video/BV1zF411R7xg/?spm_id_from=333.999.0.0&vd_source=7e86aff88430dc49c39de082d6a0f147
  4. https://www.bilibili.com/video/BV1Lh411A76E/?spm_id_from=333.999.0.0&vd_source=7e86aff88430dc49c39de082d6a0f147

点此查看原文>>>