AIGC 全稱 AI Generated Content，是利用人工智能技術來生成內容，AIGC 繪畫屬于 AIGC 的分支。
近半年，以 Midjourney 和 Stable Diffusion 為代表的 AIGC 繪畫迎來爆發式發展，掀起了一場生產力革命。
Midjourney 和 Stable Diffusion 強大的創造力和無與倫比的高效性，使設計師通過它們提升生產力成為了必然。然而 Midjourney 和 Stable Diffusion 作為開放性工具，本身具有隨機性與不可控性，很多設計師很難在工作中運用，僅淪為娛樂工具。
本篇文章基于網易 ASAK 設計團隊實際運用案例，帶你破除 AIGC 繪畫工具的不可控性，讓它們成為你設計路上披荊斬棘的神器。
通過 Midjourney 和 Stable Diffusion 已落地項目類型分類，全文大綱如下：
- 設計提效
- 活動彈窗設計
- 勛章圖標設計
- IP 設計
- KV/海報設計
- 場景設計
- 動畫分鏡設計
- 物料設計
- 設計師后記
當未使用 Midjourney 和 Stable Diffusion 時，通常設計師流程如下：
在設計參考階段，設計師需要找大量的參考圖，這一過程需要 0.5-1 天。設計師基于設計參考，完成設計初稿，這一過程至少需要 1 天。
而 Midjourney+Stable Diffusion 在整個設計流程中，可以極大地縮短概念風格、設計初稿和設計終稿的反復溝通時間。如下圖所示：
使用 Midjourney 或 Stable Diffusion 直接生成設計圖，設計師再做細節優化。整個設計流程提升效率 25-55%。
先運用 ChatGPT 獲取彈窗的設計思路，從多角度切入設計，使設計方案更完善，如下圖所示：
通過 ChatGPT 分析后，我們可以從中提取的關鍵詞：黑金、高級感、精致、質感。
繼續具象延伸，再添加寶石、榮耀感、堅硬感和鉆石等關鍵詞。為了讓元素更加立體，可以帶上 3D 和三維渲染器等相關關鍵詞。
轉化成對應的英文后，關鍵詞如下：
Prompt: Shining gemstone, high class, noble sense, glory sense, 3D, hard, diamond, Octane Render
Negative prompt: Low saturation, deformity, sketch, blur
將初稿中的鉆石圖放進 Stable Diffusion 圖生圖功能。輸入關鍵詞，重復幅度調到 5 以下，反復多批量產出后篩選出想要的結果，如下圖所示：
通過 Stable Diffusion 生成更有質感和高級感的設計主體元素，節省大量設計細節的時間。下圖為初稿、AI 輔助和終稿:
Midjourney 和 Stable Diffusion 也可以制作勛章圖標。
勛章一般需要簡化版和精細版，用于不同尺寸的使用場景。
以網易大神夢幻西游武神壇勛章為例，借助 Stable Diffusion，只需要輸出簡化版本的設計，讓 Stable Diffusion 去深入刻畫。
然后用生成最滿意的圖繼續下一輪刻畫，以達到最貼合自己需求的出圖。
勛章自帶榮譽感屬性，因此可以從這個思路出發，得到寶石、金屬質感、閃耀感和高級感等關鍵詞。轉化成對應的英文關鍵詞如下：
Prompt: Metallic texture, Shining gemstone, high class, noble sense, glory sense, 3D, hard, diamond, Octane Render
Negative prompt: Low saturation, deformity, sketch, blur
輸入對應的關鍵詞后，得到設計圖如下所示：
在設計 IP 前期，設計師需要先確定 IP 的應用場景，根據應用場景來確定 IP 的角色動作。
在這一階段，設計師可以通過 Stable Diffusion 輸入相關動作的關鍵詞，來提取靈感參考。
以網易大神 IP 霸哥為例，講解如何用 Stable Diffusion 制作 IP 素材。
下圖 1 是設計師手繪草稿，下圖 2 是最終 Stable Diffusion 完成的 IP。
第 1 步：繪制角色動作線稿
確定好角色動作后，開始給角色繪制草圖線稿。我們給霸哥設定的動作是單手持玩具槍，眼神堅毅地望向前方。如下圖所示：
注意：草圖線稿最好較為干凈連貫，以免 AI 識別不完整，導致輸出的圖片出錯（示例圖的草稿還是有些隨意，建議自己做的時候再精細一點）。
第 2 步：選擇并下載合適模型以及插件
這一階段，我們需要結合 IP 形象的特點，有針對性地選擇模型和插件。
考慮到霸哥形象整體呈圓形，風格偏可愛，抓住角色的這些特點，我們可以去到 C 站（civita）上選擇相對應的模型。
我們選擇的大模型是：MeinaMix；Lora 插件是：blindbox。（模型選擇不是唯一的，有感覺適合的也可以嘗試使用。）
第 3 步：設置 controlnet 面板
在文生圖界面，往下滑找到 ControlNet 這一欄（要先安裝部署好 controlnet 插件），將繪制好的線稿草稿上傳至相應位置。并將啟用勾選上，如果線稿圖片背景為白色，可以把反色模式也一起勾選。
接著在下方的預處理器和模型上，選擇好 canny（邊緣檢測）以及 control_any3_canny [95070f75]模型。
有時候模型顯示不出來可以點擊旁邊的刷新按鈕，刷新一下就有了，這一步非常重要，切記不要忘記設置！否則輸出的模型會與線稿沒什么關聯。
設置好后，其余的參數可以不動，也可以根據自己的需求做調整。
第 4 步：輸入關鍵詞并設置參數
關鍵詞如下圖所示：
Prompt：(masterpiece),(best quality),(ultra-detailed), black body, thick red lips, The body is a black ball with thin arms, wearing white gloves on its hands It has round black eyes, and short legs with red shoes, Wearing a display screen on the head, Holding a toy gun in its hand
Negative prompt：(worst quality, low quality, medium quality:1.4), low-res, (bad_prompt_version2:0.7), easy negative, bad-hands-5, red hands, white shoes, EasyNegative, text, blob
身體的顏色，手腳的顏色和嘴巴特征主要描述了霸哥的形象特征。
采樣方法（Sampler）上，因為我們想做的是三維模型，所以選擇偏寫實風格的 DPM++2M Karras（該采樣方法不唯一）。其余參數沒有特定要求，可根據輸出的圖片效果靈活調整。
第 5 步：產出圖片/后期調整
前期出圖可能效果會有些偏差，這時候可以靈活調整一些參數，并多生成幾次。挑選出最接近霸哥形態的圖片進行后期處理即可。下圖為其中一個生成示意圖：
1. KV 設計
在設計前期，設計師希望得到的畫面是：預言家在中心操控著魔法球，兩邊的魔法狼群圍繞著她，然后中心散發光芒，頭發飛舞為畫面的核心。
其中風格關鍵詞：暗黑風，神秘，狼人，夜晚，哥特。
結合 chatpgt 轉化成故事描述，獲得精準關鍵詞。
按照 Midjonrney 的語言描述：客觀描述+風格。
其中客觀描述如下：
A beautiful seer is holding a glowing magic ball in the center of the picture, with orange-red hair fluttering around her, surrounded by a group of transparent blue magic wolf heads
插畫風格如下：
Illustration, Drawing, Hand-Drawn, Isometric, Saturated, Split-Complementary-Colors, 2-Dimensional, Rays of Shimmering Light
使用 Midjonrney v5 輸入關鍵詞后，不斷調試后得到如下圖所示：
上述圖片風格非平面插畫類，那么繼續優化關鍵詞，這次加入關鍵詞：Graphic illustration（平面插畫）重新放在 Midjonrney 里面，并且把引擎模型改成 niji 得到如下圖：
將上述 AI 生成的圖，給業務方評估風格，這樣需求方可以更清晰直觀地感覺后續設計風格，有利于提出更有建議性的意見。最后設計師從氣氛、構圖和整體細節進行調整。完成線稿后，基于線稿快速實現設計終稿。
下圖 1 為線稿，下圖 2 為最終稿：
如果沒有 Midjourney 的話，那么設計師至少需要出一版設計初稿給業務方，業務方根據設計初稿提修改意見。
有了 Midjourney，可以快速實現腦海畫面，擁有更多更快試錯機會。
在這個流程中 Midjourney 承擔著設計初稿的執行角色。
2. 海報設計
設計團隊接到狼人殺游戲賽事的 3 張倒計時天數海報。
需求風格：暗黑哥特漫畫風格手繪。
業務方希望設計交付時間為 3-4 天。然而一張純手繪的時間需要 2 天（三張則是 6 天），時間完全不夠，所以需要借助 AIGC 來提高效率，做到準時交付。
接到需求后，設計開始了前期提案。先用 Midjourney 完成我們的設計表達，讓需求方更清晰直觀地感覺到設計稿的風格感。
我們以倒計時還有 1 天的海報為例。
第 1 步：實現腦海畫面
海報構思畫面：狼人變身，一條光柱表示 1 的形式。關鍵詞如下：
A transformed beam of light soars into the sky, amazing Abigail Larson style, Illustration, Hand-Drawn, Macro, Depth of Field, Dichromatism, 2-Dimensional --iw 0.5 --s 1000 --ar 9:16
畫面重點關鍵詞：光柱
雖然上述生成效果圖不太完美，但可以讓需求方更清晰直觀地感覺到設計稿的方向。
第 2 步：根據已確認方向，背景圖制作
因為古堡和大月亮構圖已較為常見，所以我們直接用 Midjourney 進行基礎的背景繪制，關鍵詞如下：
Abigail Larson, an original painting of a scene, a broken village in the middle of the night, a white full moon in the night sky, clouds and mist around the moon, dark blue background --ar 2:4
畫面重點關鍵詞：古堡，月亮。
第 3 步：最終細化繪制，完成作品
從生成圖中挑選數張，選取每一張突出的地方進行合成、重制筆觸和添加細節后，得到如下圖所示的背景圖：
最后加上狼人和光束變身特效后，進行簡單排版就完成了終稿。
倒計時還有 2 天和 3 天運用類似上文 kv 設計思路，最終三張交付稿如下所示：
按照傳統提案過程，需要尋找大量參考，然后合成拼湊出一張接近效果的圖，三張海報的提案需要大概 1.5 天。
現在使用 Midjourney 進行批量出圖，寫出對應的關鍵詞，出來的效果非常接近最后呈現的感覺，0.5 天就能完成三張提案效果圖。并且需求方能清楚了解到最后效果，更快做出審核。
三張手繪倒計時海報，在 Midjourney 輔助下，從 7 天左右的工作量縮減到 3-4 天，對于設計和質量都有較為正向的反饋，值得繼續深入研究并在工作中推廣。
1. 倩女幽魂虛擬演播廳
以倩女幽魂演播廳概念圖設計為例，講解 Midjourney 是如何定向控制，生成設計師和業務方想要的設計稿。
倩女幽魂這次的太一斗魂壇，需求方想要的風格元素是唐朝建筑、墨子機關元素和整體以紅色建筑為主。
設計師開始嘗試用 Midjourney 做前期框架搭建。
第 1 步：關鍵詞生成概念圖
開始以雄偉的中國式建筑和紅色機關等關鍵詞跑圖。對應的關鍵描述如下：
Chinese palaces surround the central stage, there are mechanical gears on the building, Chinese style, red, Volume cloud, Volume light
然后調整關鍵詞如下圖所示：
Many red Chinese-style buildings surround the central stage, and there are mechanical gears on the buildings, clear structure, Volume cloud as background, Magnificent atmosphere, Unreal Engine 4
生成新的概念圖如下圖所示：
第 2 步：優化關鍵詞
上述生成的概念圖雖然有紅色中國風建筑和機關元素，但擂臺的感覺不夠強烈，缺少建筑纏繞的感覺。
重新修改了關鍵詞加入擂臺和建筑環繞中心舞臺等元素，關鍵詞如下：
Many red Chinese-style buildings surround the central stage, and there are mechanical gears on the buildings, Clear structure, Volume cloud as background, Magnificent atmosphere, Unreal Engine4, --ar 16:9
第 3 步：精選效果圖合成初稿
上面幾張概念圖已經比較接近我們想要的效果。
最后設計師進行二次修改、合成和手繪后得到設計稿，如下圖所示:
第 4 步：Midjourney 快速修改
需求方審核后，需要臨時調整整個構圖，畫面改成懸空建筑擂臺，空中需要漂浮的巖石，所以我們修改了關鍵詞為懸空擂臺、漂浮在空中的中國風建筑等。關鍵詞如下：
A piece of Chinese architecture floating in the sky, the building is built on floating rocks, the center of the rock is a stage, and the buildings surround the stage --ar 16:9
這次改動如果不借助 Midjourney，我們就要大面積重新制作，而使用 Midjourney 來制作浮空島的場景，只需要將我們之前合成好的建筑場景后期替換進去。
經過多張類似的推演，我們得到了一張適合通過后期手繪合成的圖，做出的設計圖如下所示：
設計稿經過需求方順利通過后。交付給 AR 部門進行舞臺搭建工作。
第 5 步：AR 虛擬搭建演播廳
AR 部門搭建演播廳的設計圖，如下所示：
下圖虛擬演播廳中的解說桌也是使用類似的 AI 輔助流程完成的制作：
2. AR 氛圍概念參考
AR 技術在電競賽事應用中已經相當普及，AR 即增強現實，為電競提供了全新表現形式。
此次永劫無間賽事，由于場地空間的限制，設計師希望通過 AR 場景與舞臺效果結合，讓觀眾和用戶有更好的觀賽體驗。
第 1 步：投喂風格圖
用前期賽事 KV 草圖和官方概念圖投喂到 Midjourney 中，下圖為投喂圖：
第 2 步：生成場景圖
配合關鍵詞如下：
Mountain forest style, concept art, sunshine, been invaded, god ray, there is Tiger Mountain in the distance, and there is a waterfall on the mountain on the right, high detail, hyper quality, scene type, high resolution, with waterfall, forest style, sunshine, god ray, scene type, waterfall on the right, concept art, and stage in the mid shot, foreground close to water, wooden bridge in the foreground, dilapidated wooden bridge, tiger mountain and bandits in the foreground, --ar 16:9
我們成功地生成了山林主題的場景概念圖，如下圖所示：
第 3 步：合成初步效果
結合賽事舞臺設計制作的渲染圖，如下所示：
將 Midjourney 生成的概念圖與舞臺設計制作的渲染圖合成后，最終的舞臺整體效果，如下：
第 4 步：三維建模和 UE 場景搭建
在上述基礎上，進行三維模型制作以及 UE 場景搭建，形成最終的賽事場景效果圖，如下圖所示：
設計師手繪的動畫分鏡圖，如下圖所示：
上述分鏡較為簡陋，嘗試運用 Stable Diffusion 來進行上色優化。
第 1 步：優化 controlnet 可識別范圍
根據已有手繪分鏡，按照應用場景使用 controlnet 插件功能：seg（語意分割）和 canny（線稿）。這兩個功能在腳本使用中頻率較高。
第 2 步：方式①使用controlnet的語意分割功能，實現畫面分區
手繪分鏡的 P1/P5/P9/P10 使用的是 seg 功能。通過在 Photoshop 中劃分顏色來告訴 AI 這部分要的是什么物體。
以 P8 為例，兩側為墻壁 #787878，地面為地板#503232，中間為人物#96053e（可通過 ADE20K_classes 表格來獲取色值信息）。
在手繪圖上大概劃分好顏色區域后添加到 Stable Diffusion 的 controlnet 中，因為我們在 Photoshop 中已經做了一些前期工作，所以就不用啟用預處理模式，直接選擇 seg 模型然后預處理。
開始添加 tag，我們拿到的腳本是角色慌張地逃跑，那么我們可以優化為“有一個在往前跑，黑暗深處，神秘，紫色等詞來描述翻譯后得到：There is a person running back, deep in the dark, mysterious, purple. Tag 交給 Stable Diffusion 來生成。
第 2 步：方式②應用controlnet的線稿功能，進行區域上色
以手繪 P12 為例，我們使用的是 canny（線稿）模式。直接把草圖給到 controlnet，優化詞為：紫色的章魚觸手從地面出來、碎石、破碎、兩顆棋子。翻譯后得到英文關鍵詞如下：
Purple octopus tentacles come out of the ground, gravel, broken, two pawns
上圖中的 P6 是符合我們的需求，將 P6 使用圖生圖中做二次細化，如下圖所示：
第 3 步：上色氛圍分鏡輸出
運用 Stable Diffusion 來進行上色氛圍，讓需求方更直觀地了解整個分鏡效果，同時可以為后續視覺靜態稿提供氛圍參考。
游戲賽事中的獎杯是設計需求中不可或缺的一環。設計師可以利用 Midjourney 和 Stable Diffusion 進行大量的前期素材儲備。
以下是需求之外，完成對賽事獎杯的素材儲備。
第 1 步：使用 Midjourney 生成靈感素材
下圖是使用 Midjourney 生成的各種獎杯概念圖。
第 2 步：繪制草圖
根據 Midjourney 生成的概念圖，設計師手繪生成獎品草圖。
第 3 步：Stable Diffusion 二次創作
根據草圖，使用 Stable Diffusion 精準控制上色，完成最終的獎杯素材，如下圖所示：
這些儲備可以為后期其他設計項目提供素材，進一步提升設計效率。
Midjourney 和 Stable Diffusion 的崛起，導致很多設計師焦慮，擔心被取代。通過上面的案例可以看出 Midjourney 和 Stable Diffusion 只能完成項目中的一部分，無法做到獨立完成項目，都需要設計師二次創作。
早期 UI 設計師的工具是 Photoshop。后面出現高效的 Sketch。到如今設計師使用更高效的協同工具 Figma。
而 AIGC 本質上還是提效輔助工具，需要設計師去掌握更高超的操作技能。
決定設計的成敗從來是人，而不是工具。
歡迎關注作者微信公眾號：「ASAK設計」
復制本文鏈接 文章為作者獨立觀點不代表優設網立場，未經允許不得轉載。
繼續閱讀本文相關話題
熱評 暮色