好久沒更新了,最近發布的 Flux 質量著實驚艷到了我,順便整理了一下發布了這篇文章。關于 ComfyUI 進階教程我已經重新拾起來了,后面會繼續更新。
往期教程:
前言:
前 Stability AI 成員 Robin Rombach 創立了 Black Forest Labs 并發布了三個開源模型:FLUX.1 [pro]、FLUX.1 [dev] 和 FLUX.1 [schnell];
- [pro] 是最頂級的模型,但是僅可通過 API 調用;
- [dev] 是由[pro]提煉,開源但非商用,質量和效果與[pro]類似;
- [schnell] 是經過蒸餾的 4 步模型,速度比 [dev] 快 10 倍,Apache 2 許可。
FLUX.1 [pro] 和 [dev] 在視覺質量、提示遵循性、 尺寸/縱橫的多樣性、字體排印和輸出多樣性方面均超過了 Midjourney v6.0、DALL·E 3 (HD) 和 SD3-Ultra 等流行模型(官方說的,事實如何我們看后面的對比);
目前 ComfyUI 已支持此模型,更新到最新版即可使用。
使用 FLUX 不僅需要使用 FLUX 本體,還需要下載 CLIP 以及對應的 VAE;
我這么貼心肯定已經已經下載好,上傳到百度網盤了。大家可以根據下方的官方地址下載,也可以去文章末尾的百度網盤下載,網盤中有這節課用到的所有模型、工作流等內容。
下載 CLIP 模型:
需下載 t5xxl_fp16.safetensors 或 t5xxl_fp8_e4m3fn.safetensors (建議 fp8 版本,如果你顯存超過 32G 可選擇 fp16 版本)和 clip_l.safetensors 到 ComfyUI/models/clip/ 目錄中;
此模型和 SD3 使用的是一樣的,如果文件夾中已有,可以不用下載
下載地址: https://huggingface.co/comfyanonymous/flux_text_encoders/tree/main
下載 VAE 模型:
下載 ae.sft 存放至 ComfyUI/models/vae/ 目錄;
下載地址: https://huggingface.co/black-forest-labs/FLUX.1-schnell/blob/main/ae.sft
下載 Flux 模型:
FLUX 模型有四個可選,FLUX.1 [dev] 、FLUX.1 [dev] fp8、FLUX.1 [schnell]、FLUX.1 [schnell] fp8;
① FLUX.1 [dev] :官方版本滿配版,沒幾個小伙伴跑的動;
下載地址: https://huggingface.co/black-forest-labs/FLUX.1-dev/blob/main/flux1-dev.sft
② FLUX.1 [dev] fp8:大佬優化 [dev] 后版本,建議選擇此版本,最低 12G 顯存可跑;
下載地址: https://huggingface.co/Kijai/flux-fp8/blob/main/flux1-dev-fp8.safetensors
③ FLUX.1 [schnell]:4 步蒸餾模型,(前言有寫),大多數顯卡可跑。
下載地址: https://huggingface.co/black-forest-labs/FLUX.1-schnell/blob/main/flux1-schnell.sft
④ FLUX.1 [schnell] fp8:大佬優化 [schnell] 后版本,建議選擇此版本,其他同上,但能適應更低的顯卡配置。
下載地址: https://huggingface.co/Kijai/flux-fp8/blob/main/flux1-schnell-fp8.safetensors
存放位置:ComfyUI/models/unet/目錄。
ComfyUI 工作流我就不一個個節點搭了,可以直接去下方的 ComfyUI 官方網址下載(官方只給了文生圖),也可以去我的網盤下載(網盤中有我稍微調整過的、以及圖生圖): https://comfyanonymous.github.io/ComfyUI_examples/flux/
1. 文生圖
FLUX.1 [dev] 模型:
① FLUX.1 [schnell] 4 步蒸餾模型:
2. 圖生圖
① FLUX.1 [dev] 模型:
② FLUX.1 [schnell] 4 步蒸餾模型的圖生圖就不推薦使用了,圖生圖就是通過調節降噪數值來控制所跳過的生圖步數進行的,而 [schnell] 只需 4 步就能生成圖片,也就會導致無法得到很好的控制效果。
FLUX.1 [Por] 模型(只有只能通過 API 使用): https://replicate.com/black-forest-labs/flux-pro
FLUX.1 [schnell] 試用: https://huggingface.co/spaces/black-forest-labs/FLUX.1-schnell
在一些地方確實強于 Midjourney,比如對提示詞的遵循性、文本內容的準確性、尺寸/縱橫比;
美學程度、風格多樣性(尤其是畫家風格)不如 Midjourney。雖然如此,但是已經可以和 MJ 平起平坐了,甚至超越 MJ 了,畢竟開源啊。
不過,雖然開源,但是 [dev] 并不免費商用,會導致很多大佬們不會進行微調以及訓練對應的 Lora、CN 等模型;
再有就是他慢啊,此模型對顯存要求極大,不是每個人都有 4090 的。
復制本文鏈接 文章為作者獨立觀點不代表優設網立場,未經允許不得轉載。
發評論!每天贏獎品
點擊 登錄 后,在評論區留言,系統會隨機派送獎品
2012年成立至今,是國內備受歡迎的設計師平臺,提供獎品贊助 聯系我們
AI輔助海報設計101例
已累計誕生 737 位幸運星
發表評論 為下方 20 條評論點贊,解鎖好運彩蛋
↓ 下方為您推薦了一些精彩有趣的文章熱評 ↓