sd-webui-controlnet擴展：該擴展已增加了來自社區(qū)的多個控制模型的支持。許多新模型與SDXL有關，其中包括幾種用于Stable Diffusion 1.5的模型。sd-webui-controlnet 1.1.400是為1.6.0以上版本的webui開發(fā)的。

新支持的模型列表：該列表包括了多個模型，如diffusers_xl_canny_full.safetensors、diffusers_xl_depth_full.safetensors等。

此外，這次更新還特別強調了VRAM的使用。所有的方法都已經在8GB和6GB的VRAM上進行了測試，為不同配置的用戶提供了更加友好的使用體驗。

所有方法都已在8GB VRAM和6GB VRAM上進行了測試。對于8GB vram，推薦的cmd標志是--medvram-sdxl。對于6GB vram，推薦的cmd標志是--lowvram。

Control-LoRAs是來自StabilityAI的控制模型，用于控制SDXL。當這些模型發(fā)布時，StabilityAI在官方用戶界面ComfyUI中提供了json工作流。

除了上述模型，還有其他模型如Openpose、Recolor (SDXL)、T2I-Adapter、IP-Adapter等。特別地，Ip adapter和reference的雙重加持，使得一張參考圖也能模仿風格。

同時，還強調了webui版本的control net和comfyUI的區(qū)別，生成的效果上有什么不同等。我覺得目前就是各有優(yōu)勢。

我認為這次更新不僅僅是一個版本的迭代，更是整個AI圖像生成領域的一個重要里程碑。它不僅提供了更多的控制模型，還為用戶提供了更加友好的使用體驗。這意味著，未來的AI圖像生成將更加真實、有趣和多樣。

特邀作者：早稻田大學計算機系在讀博士 王軍杰