大家好,這里是和你們一起探索 AI 的花生~
最新 ControlNet 有兩款新模型非常熱門,一個(gè)是用于提取圖像線稿的預(yù)處理模型 Anyline,一個(gè)是 SDXL 線條類控制模型 Mistoline。它們不僅單獨(dú)的功能強(qiáng)于目前的 canny、lineart、softedge 等模型,組合在一起更是可以快速準(zhǔn)確地處理超復(fù)雜的圖像,今天就為大家詳細(xì)介紹一下它們的特點(diǎn)和用法。
相關(guān)推薦:
Anyline 是一款新的線條類預(yù)處理模型,可以從大部分圖像中快速提取高精度的線稿圖。與其他常用的線條預(yù)處理器相比,Anyline 在輪廓精度、對(duì)象細(xì)節(jié)和字體識(shí)別(尤其是在大型場(chǎng)景中)方面具有顯著優(yōu)勢(shì)。在大多數(shù)場(chǎng)景中,它在減少噪點(diǎn)方面也表現(xiàn)更好,能實(shí)現(xiàn)更清晰的圖像處理。
下圖是 Anyline 與其他預(yù)處理模型的效果對(duì)比,可以看到 Anyline 可以提取非常微小的細(xì)節(jié),線條也非常完整清晰,即使是很小的文字也可以復(fù)現(xiàn),相比之下 canny 和 lineart 在細(xì)節(jié)上多少都會(huì)有一些丟失。因此 Anyline 非常適合用來處理場(chǎng)景復(fù)雜或者需要精準(zhǔn)控制細(xì)節(jié)的圖像,比如文字、紋理材質(zhì)、機(jī)械細(xì)節(jié)等。
Anyline 目前已經(jīng)可以在 SD WebUI 和 ComfyUI 中使用了。SD WebUI 只需要將 controlnet 更新到最新版本,就能在預(yù)處理器列表中看到 softedge_anyline 選項(xiàng)了。初次使用會(huì)自動(dòng)從網(wǎng)上下載一個(gè) MTEED.pth 文件到 extensions\sd-webui-controlnet\annotator\downloads\TEED 文件夾中,如果自動(dòng)下載失敗可以手動(dòng)安裝(文末云盤有模型資源)
如果是 ComfyUI,需要先安裝一個(gè)名為 comfyui-anyline 的插件,可以從 manager 中安裝,也可以通過 github 克隆。安裝完成后,再進(jìn)入插件文件夾中,打開終端執(zhí)行 pip install -r requirements.txt 命令。然后重啟 comfyui,搜索 “anyline” 即可找到對(duì)應(yīng)節(jié)點(diǎn)。
MistoLine 是一款強(qiáng)大的 SDXL ControlNet 控制模型,它可以根據(jù)用戶提供的各種類型的線條圖生成高質(zhì)量的圖像(短邊大于 1024px),包括手繪草圖、不同的 ControlNet 線條類預(yù)處理圖和 3D 模型線框圖等。
MistoLine 生成的圖像在穩(wěn)定性、細(xì)節(jié)還原上比現(xiàn)有的線條類 CN 模型表現(xiàn)都好。如果和 Anyline 配合使用,加上 SDXL 模型,可以很輕松地生成 1024*1024px 以上的高清圖像,用來處理場(chǎng)景復(fù)雜、層次豐富、紋理豐富的圖像效果非常好,因此目前最推薦的就是 Anyline 和 MistoLine 的搭配使用。
MistoLine 同樣可以在 SD WebUI 和 ComfyUI 中使用, 使用時(shí)前需要下載 mistoLine_rank256.safetensors 模型(文末有資源包),安裝到 extensions\sd-webui-controlnet\models 或者 comfyui\models\controlnet 中,然后重啟應(yīng)用,再按正常流程選用模型即可。使用時(shí)需要注意選擇 SDXL 的 checkpoints 大模型。
文末的資源包內(nèi)有還有搭建好的 Anyline+Mistoline ComfyUI 工作流,用來處理大幅的、場(chǎng)景復(fù)雜、需要清晰細(xì)節(jié)的圖像非常方便。
那么以上就是本期為大家推薦的 Controlnet 線條類新模型 Anyline 和 Mistoline。喜歡的話記得點(diǎn)贊、收藏、評(píng)論三連支持一波,我會(huì)更有動(dòng)力為大家推薦更多 AI 干貨內(nèi)容。相關(guān)模型、工作流文件都在下方的云盤鏈接內(nèi),記得下載~
如果你也想學(xué)習(xí)使用 Midjourney 和 Stable Diffusion 這兩款 AI 繪畫工具,可以了解一下我最新制作的課程《零基礎(chǔ) AI 繪畫入門》已經(jīng)上線,課程包含對(duì) Midjourney 及 Stable Diffusion WebUI 的系統(tǒng)入門教學(xué),并提供配套資源、各類實(shí)用工具和提示詞庫,能幫助初學(xué)者快速掌握這 2 款目前最熱門的 AI 工具,感興趣的小伙伴可以戳的鏈接了解詳情:夏花生的《零基礎(chǔ) AI 繪畫錄播課》
也歡迎大家掃描下方的二維碼加入“優(yōu)設(shè) AI 知識(shí)交流群”,和我及其他設(shè)計(jì)師一起交流學(xué)習(xí) AI 知識(shí)~
相關(guān)鏈接:
- MistoLine 項(xiàng)目地址: https://github.com/TheMistoAI/MistoLine
- AnyLine 項(xiàng)目地址: https://github.com/TheMistoAI/ComfyUI-Anyline?tab=readme-ov-file
- MistoLine 模型下載地址: https://huggingface.co/TheMistoAI/MistoLine/tree/main
- SD WebUI Controlnet 更新說明: https://github.com/Mikubill/sd-webui-controlnet/discussions/2907
推薦閱讀:
復(fù)制本文鏈接 文章為作者獨(dú)立觀點(diǎn)不代表優(yōu)設(shè)網(wǎng)立場(chǎng),未經(jīng)允許不得轉(zhuǎn)載。
發(fā)評(píng)論!每天贏獎(jiǎng)品
點(diǎn)擊 登錄 后,在評(píng)論區(qū)留言,系統(tǒng)會(huì)隨機(jī)派送獎(jiǎng)品
2012年成立至今,是國內(nèi)備受歡迎的設(shè)計(jì)師平臺(tái),提供獎(jiǎng)品贊助 聯(lián)系我們
AI輔助海報(bào)設(shè)計(jì)101例
已累計(jì)誕生 737 位幸運(yùn)星
發(fā)表評(píng)論 為下方 15 條評(píng)論點(diǎn)贊,解鎖好運(yùn)彩蛋
↓ 下方為您推薦了一些精彩有趣的文章熱評(píng) ↓