【AIGC专栏】StableDiffusion的WebUI中的ControlNet

5分钟学会Stable Diffusion强大的ControlNet插件

设计师们往往对于新出的绘画工具上手比较艰难，本文针对目前比较火热的Stable Diffusion+ControlNet指导AI艺术设计的工具使用进行全面讲解。很多人会有预感，未来要么设计师被图形学程序员取代，要么会使用AI工具的设计师取代传统设计师，2023年开始，AI辅助设计甚至主导设计已经成了司空见惯的现象。软硬件环境：OS: Ubuntu 20.04(Stable Diffusion开发需要Linux 环境，纯使用Web工具也可在WIndows下运行)11.7。

下面综合对比以上三种方法生成的效果人脸部分：衣服部分：以下是我对三种方法的个人打分，相对直观的反应了3种高分放大方法的使用体验。总的来说，无论是使用 Ultimate SD upscale 还是 ControlNet + Ultimate SD upscale 进行放大，其处理时间都会远远大于AI放大法，相应的效果也会更好。而普通的SD放大能真实的还原图片原本信息，不做修改，而且处理时间很短，但也意味着会放大图片本身存在的下次。具体应该选择哪种方法，就需要根据个人情况自行选择了。

之前讲了stable diffusion webui搭建,这里主要介绍使用方法以及模型,扩展等.使用NovelAI,lora模型

前提是你已经在本机搭建好了GPU运行环境，建议6G以上GPU，当然，CPU也可以运行，就是奇慢无比。7.Lora模型权重（cuteGirlMix4_v10，seeThroughSilhouette_v10）想自己生成AI美女吗？6.最重要的Stable-diffusion模型chillout（需要魔法上网）3.运行webui_user.bat自动安装（这个过程比较长哦）（中间会踩坑，需要自己爬起来）4. 中文版本（extensions扩展页面安装）5. 重要外挂（extensions扩展页面安装）

ControlNet（控制网络）是一种先进的神经网络架构，它为基于扩散模型的 AI 绘画流程引入了精确的控制机制。通过整合额外的条件约束，ControlNet 显著增强了图像生成的可预测性和指导性。在 ControlNet 的辅助下，用户能够对生成的艺术作品进行细致入微的指导，实现对构图、色彩、风格等多维度因素的把控，从而满足各种复杂场景和个性化需求。这一技术为 AI 绘画领域带来了革命性的突破，使得 AI 绘画能够更好地满足用户的具体需求，成为一种真正的生产力工具。项目链接地址论文。

本文介绍了使用StableDiffusion生成艺术化二维码的方法。首先需要安装二维码组件并重启软件，然后通过设置两个ControlNet参数：QRCodeMonster（权重1.2+）和BrightNess（权重0.3左右），分别控制不同阶段的生成效果。同时可以利用图生图功能反推提示词，或直接使用文生图功能生成二维码图像。该方法可将普通二维码转化为具有艺术效果的图像。

ControlNet 和 T2I-Adapter 的突破性在哪里？有什么区别？其它为 T2I 扩散模型施加条件引导的相关研究ControlNet 和 T2I-Adapter 的实际应用效果如何？使用体验上，跟 SD原生支持的 img2img 有什么区别？ControlNet 在插画创作上的潜力多种条件引导的组合使用ControlNet 在3D和动画创作上的潜力哪里可以免安装且免费玩上？论文和模型这...

AI绘画stable-diffusion-webui+ChilloutMix云部署

Stable Diffusion是一种人工智能（AI）模型，可以根据训练数据创建图像。Stable Diffusion使用的是一种称为潜在扩散模型（LDM）的东西。Stable Diffusion用于根据文本提示生成图像，并使用修复和外部绘制的过程改变现有的图像。参考资料1：参考资料2：参考资料3：不想写的太长，更详细的介绍请查看参考资料ControlNet是一种网络结构，通过添加额外控制条件，来控制出图效果。（官网，适合高玩直接上手）（推荐新手照着做）

最近 AI 火的一塌糊涂，除了 ChatGPT 以外，AI 绘画领域也有很大的进步，以下几张图片都是 AI 绘制的，你能看出来么？

一步一步学习 Stable Diffusion

女模特总是不配合？用它！游戏原画没灵感？也用它！建筑绘画各行各业设计都用它！它就是 ControlNet！只需简单调整参数就能产出无限创作灵感，提高我们的创作效率！这款 SD 插件已成为了AI 绘画领域最新的热点。而它的出现代表着 AI 生成开始进入真正可控的时期，而 AIGC 的可控性是它进入实际生产最关键的一环。

Stable diffusion 使用ControlNet 生成高清大图，包含ControlNet 下载踩坑，模型下载使用