StableDiffusion是由StabilityAI开发的图像AI大模型,能够根据文本指令生成全新图像,也能够根据文本指令修改现有图像。StableDiffusionWebUI是由AUTOMATIC1111为该模型开发设计的可视化浏览器界面操作平台,用户即使不具备编程知识或高级技术,也能通过直观的前端交互轻松使用模型功能。
通过WebUI,您可以享受到直观的操作体验,WebUI不仅赋予用户直观方便的操作体验,还能通过装载不同的插件和模型以满足定制化需求,从而创造出更为可控的视觉作品。
序号
区域
①
②
③
参数区域
④
生图区域
如果无法访问,您可能需要设置代理后再尝试重新访问。
常见的通用范式:前缀(画质词+画风词+镜头效果+光照效果)+主体(人物&对象+姿势+服装+道具)+场景(环境+细节)
图生图技术可依据提示词描述的特点,将一张图片转化为具有新特点的另一张图片,例如将真人照片转为动漫形象,或自动为画作线稿上色。同时,该功能支持参数调整,并具备局部重绘功能,用户能在指定区域进行重绘而不影响其他部分,也可利用涂鸦画笔对原图进行修改后再次生成。
生成的图片不仅能作为新的图生图输入以进行循环创作或局部再编辑,还可用于其它附加功能。此外,系统能够根据输入图片自动生成关键词,通过CLIP与DeepBooru两种AI模型实现反推,其中CLIP适用于写实风格图片,DeepBooru则适用于动漫图片。
具体操作步骤如下。
在原图上添加一个蒙版(将需要修改的部位涂黑),对蒙版或者非蒙版区域进行重绘操作。
在局部绘制的基础上增加了调色板,让绘制过程参考蒙版颜色。
上传在外部工具(如Photoshop)中制作的蒙版进行遮罩操作,适用于对遮罩区域精细化程度有较高要求的用户。为实现这一效果,请将您预先制作完成的精细蒙版文件上传至下图的下半部分。
批量处理图生图指定目录下的图片,需要建立三个文件夹:原图文件夹、输出图片的文件夹和放置蒙版的文件夹。
具体参数说明如下。
蒙版透明度
以下示例是蒙版透明度0、30、60、90的对比图。范围0~100,值越大,蒙版对保留的轮廓更明显,也会影响重绘强度。
上传由StableDifussion生成的图片,可以查看到生成图片的prompt和参数。
经测试,将原图截图或使用其他APP转发后保存的图片,无法识别图片信息。
本产品不同版本StableDiffusionWebUI及ComfyUI,上架了TheMisto.ai开发的MistoLine-SDXL-ControlNet。
参数
说明
启用
勾选后启用CnotrolNet。
低显存优化
4GB显存以下可勾选。
预处理器
不同选项具有不同的预处理效果,每一个预处理器有对应的模型,二者搭配使用。
模型
与预处理器中的模型搭配使用。需要手动下载并上传至对应OSS目录中。
控制权重
表示生成图片时,受CnotrolNet生成图片影响的权重占比。在图生图的过程中,低重绘强度配高权重,可以锁定图片的细节,更改滤镜和画风;高重绘强度配低权重,可以修改图片的细节。
引导介入时机
数值为0~1,意为百分比,表示ControlNet在第几步介入绘画。0表示从第一步就开始介入,1表示从最后一步开始介入。数值越大,CnotrolNet对生成图片的影响就越小。
例如:设置采样迭代步数为20,引导介入时机为0.3,表示从第6(20*0.3)步开始介入。
引导终止时机
数值为0~1,意为百分比,表示CnotrolNet在第几步退出绘画。