SD WebUI 中也能用上實(shí)時繪畫了！支持接入PS/Blender 等設(shè)計(jì)工具

大家好，這里是和你們一起探索 AI 繪畫的花生~

之前為大家介紹過 AI 繪畫工具 Krea，它可以根據(jù)手繪的草圖實(shí)時生成完整的畫面，可以讓我們更精準(zhǔn)地控制圖像效果，對電商、產(chǎn)品、游戲概念等設(shè)計(jì)領(lǐng)域來說非常有幫助。之前為大家推薦過一種在 ComfyUI 中免費(fèi)實(shí)現(xiàn) AI 實(shí)時繪畫的方式，今天就再為大家推薦另一種在 Stable Diffusion WebUI 中實(shí)現(xiàn)實(shí)時繪畫的方法。

一、插件簡介

SD WebUI 的實(shí)時繪畫功能需要借助一個插件實(shí)現(xiàn)，這個插件是上周由 B 站 AI 繪畫博主@朱尼醬推出，支持文生圖、圖生圖和桌面應(yīng)用捕捉，操作界面也非常便捷好用，安裝后即可借助 WebUI 的現(xiàn)有資源，在本地免費(fèi)實(shí)現(xiàn)多功能 AI 實(shí)時繪畫。

二、安裝方式

由于這款實(shí)時繪畫插件是基于 SD WebUI 的，所以使用前大家需要先安裝并掌握 SD WebUI 的基礎(chǔ)用法，沒有掌握的小伙伴看我之前寫的介紹文章，或者了解我最新制作的《零基礎(chǔ) AI 繪畫入門指南》，系統(tǒng)學(xué)習(xí) SD WebUI 的用法。

這里推薦使用秋葉大佬的一鍵整合包，先啟動軟件，在啟動器界面找到「高級選項(xiàng)-啟用 API」，將其轉(zhuǎn)為開啟模式，然后將「監(jiān)聽設(shè)置」下拉框里的「監(jiān)聽地址」改為 0.0.0.0，

在當(dāng)前頁面繼續(xù)下拉，找到底部的 「CORS 授權(quán)管理」選項(xiàng)，打開后在里面輸入一個 * 號并按 Enter 保存，然后關(guān)閉彈窗，此時的 API 的相關(guān)設(shè)置就完成了。回到啟動器主頁，點(diǎn)擊「一鍵啟動」打開 WebUI 網(wǎng)頁界面，此時網(wǎng)址會顯示為 localhost:7860，表明我們的 API 設(shè)置成功了。

然后下載文末網(wǎng)盤鏈接的資源包，先將里面的 ACC_SD15.safetensors 放置到 stable diffusion 根目錄的 models/Lora 文件夾內(nèi)，這是一個 sd1.5 的 Lcm Lora 模型，可以提升圖像的生成速度。然后解壓 Jizhi_AI 壓縮包（解壓后可以更換一下文件的路徑，讓其不要有中文），找到其中的 Jizhi_AI.exe 程序文件并雙擊啟動，就能看到實(shí)時繪畫的界面了。

二、使用簡介

整個實(shí)時繪畫的界面非常直觀好用，下面為大家簡單介紹一下它的用法。

1. 文生圖功能

①首先選好大模型（VAE 模型看大模型是否需要），設(shè)定好畫面尺寸，然后在提示詞中輸入描述畫面的內(nèi)容，比如 “masterpiece, best quality, a red cup, 3D pixar, bright light”，反向提示詞填寫常用的即可。

②選取 lora 模型。點(diǎn)擊文本框右上角的 “添加 lora” 選項(xiàng)，從中選取我們之前安裝好的 ACC_SD15.safetensors，調(diào)節(jié)滑塊設(shè)置具體參數(shù)，再點(diǎn)擊底部的 “確定” 按鈕將其添加到正向提示詞中。也可以再添加其他已安裝的 lora 模型。

③然后啟用 controlnet 模型，模型的類型按你輸入的內(nèi)容選擇。如果是直接用畫筆手繪，可以選擇 Scribble/ Sketch，這樣對線稿的精度要求低；如果是已有高精度草圖或者圖像，可以選擇 lineart 或者 depth。

④設(shè)置完成后即可在畫板中進(jìn)行創(chuàng)作了，每次畫板內(nèi)容的改動都會實(shí)時顯示在右側(cè)。畫筆可以修改顏色及大小；支持橡皮修改和撤銷操作；重繪幅度可以調(diào)整結(jié)果圖與原圖的相似程度；如果對單次生成的圖像不滿意，可以點(diǎn)擊底部的刷新小按鈕，再次生成圖像。

⑤除了手繪草圖之外，還可以插入圖像，與手繪草圖結(jié)合來引導(dǎo)新圖像的生成。

2. 屏幕捕捉功能

實(shí)時繪畫插件中最實(shí)用的應(yīng)該還是屏幕捕捉功能，我們可以將日常使用的 Ps、Ai、Blender、C4D 或者其他軟件的操作界面接入其中，這樣操作起來比其自帶的畫板更方便好用，功能也更多。具體操作方法如下：

①先打開你需要接入的軟件或者網(wǎng)頁；

②設(shè)置好實(shí)時繪畫的各項(xiàng)基礎(chǔ)生成參數(shù)，然后選擇界面頂部的 「屏幕截圖」功能，此時會彈出一個界面，包含各個目前正在運(yùn)行的軟件，從中選擇你需要的。

③選中軟件后，會有一個紅線框用于設(shè)置需要截取的畫面，一般都會將區(qū)域局限在畫布之內(nèi)，然后右下角的 “裁剪” 選項(xiàng)確定范圍。

我在這里接入的是之前為大家推薦過的 AI 3D 工具 Genie。接入后，點(diǎn)擊實(shí)時繪畫界面右上角的 「全屏顯示」宣講，將整個窗口拖動懸浮在網(wǎng)頁旁邊，此時隨意調(diào)整網(wǎng)頁中 3D 模型的方向或角度，就能在窗口中看到實(shí)時渲染的精細(xì)圖像（如果覺得渲染時間太長，可適當(dāng)調(diào)低迭代步數(shù)。但生成的圖片質(zhì)量也會有所下降）。

好啦以上就是本期為大家推薦的基于 SD WebUI 的 AI 實(shí)時繪畫插件，相關(guān)資源都在文末的云盤鏈接內(nèi)，有需要的小伙伴記得下載~ 喜歡本期推薦的話記得點(diǎn)贊收藏支持一波，也歡迎大家掃描下方的二維碼加入“優(yōu)設(shè) AI 繪畫交流群”，和我及其他設(shè)計(jì)師一起交流學(xué)習(xí) AI 知識~

參考資源：

1. https://www.bilibili.com/video/BV1Na4y1y7tt/?spm_id_from=333.337.search-card.all.click&vd_source=7e86aff88430dc49c39de082d6a0f147
2. https://www.bilibili.com/video/BV1YW4y1w7sD/?spm_id_from=333.337.search-card.all.click&vd_source=7e86aff88430dc49c39de082d6a0f147
3. https://www.bilibili.com/video/BV1iM4y1y7oA/?spm_id_from=333.999.0.0&vd_source=7e86aff88430dc49c39de082d6a0f147

推薦閱讀：