Stable Diffusion進階 -- 製作角色設定圖
前言
今天要來講的，是如何使用Stable Diffusion來製作角色設定圖。
在一兩個月之前，要製作角色設定圖這種多面向且高度一致的人物圖，除了用Textual Inversion或者LoRA之外，還有用ControlNet的方法，經過了好幾次的嘗試之後，我找出了一個最穩定出圖，且步驟最少的方法。
這個方法主要是運用了簡單的ControlNet openpose功能，以及Inpaint來製作。不需要用到Textual Inversion或者LoRA。
第一步，配合骨架圖出圖
首先，在txt2img裏面，使用這樣的正面提示詞：
(character sheet of the same exact Vallaria wearing black beret with golden rim and intricate [white|golden] robe and black cloak),
(((white background))), (((simple studio background))), reference sheet,
((fantasy)), ((kind smiling)), real face, real skin, realistic face, realistic skin, detailed eyes, detailed facial features, detailed clothes features, detailed face and breast, beautiful eyes, detailed eyes, perfect body, perfect breasts, perfect face,
(best quality, masterpiece), (realistic), photorealistic, RAW photo
<lora:VallariaV2:0.35>
第一段是交代人物的基本構造，在這例我使用自製的人物LoRA配合特定衣飾，然後用character sheet of the same exact當開頭，讓AI知道我們要繪製的是角色設定稿。
第二段交代AI使用簡單的白背景與工作室背景，免得AI畫出太多背景，干擾設定稿的質感。
第三四段添加許多修飾詞來提高整體氛圍與質感，例如我用高權重指定奇幻風，並且人物要微笑。
之後是最重要的一步，請打開ControlNet，使用Openpose，並使用繪畫人物設定稿專用的骨架圖。網路上有很多骨架圖，我使用的是這幾張：
通常第一張的尺寸我會設定為1024X512 (二比一)，這樣算圖才快，能夠一次產個十幾張不同的圖讓我挑選最滿意的圖進行下一步：
我以這張圖來進行下一步：
第二步，放大並修臉
這張圖，右邊半身像的表情與服裝正是我要的，但是左邊的角色旋轉圖問題很大，第一是臉整個都崩了，看了晚上都要做惡夢了。第二個是最左邊的角色圖，帽子長了角。
臉崩的問題主要是因為我們使用的模組，通常是專精於產生漂亮半身像與頭像，例如我使用的RealDosMix，對於全身圖、動作圖等圖不熟，AI很容易算到臉崩或肢體崩，此時我們就需要針對這些部位修圖。
首先，將第一步的圖用send to img2img這個按鈕送進img2img，然後將他擴展最少50%。以我的例子，就是擴展到1536X768，這樣AI才能在之後的步驟修臉。而Reszie mode選擇Just resize。
Just resize(latent upscale)這個選項放大出來的圖會糊掉，但是也會產生一種朦朧美，看個人需求。
另外，別忘了把txt2img的ControlNet設定也重複在這邊設定一次，否則擴圖之後人物姿勢可能會跑掉。
圖片成功放大之後，請按Send to inpaint，將圖送進部分重繪。
在這邊，要將人物崩掉的臉與出錯的服飾圈選起來：
接著將inpaint的參數設定好：
- Mask content選擇original，告訴AI其實我要的結果跟原圖差不多，這樣出來的臉才會跟整體畫風契合。
- Inpaint area選擇Only masked。如果選成Whole picture，最後臉還是會崩掉。
- Denoising strength選擇低於0.5，太高人物的頭可能會歪掉。
至於為什麼Inpaint area要選擇Only masked，這是因為這樣等於告訴AI，被選取的區域是要注重的地方，AI會將你選取的區域放大，針對放大區域重繪之後，再縮小並合併回原圖。這時你善於繪製頭像與半身像的模組就能發揮特長了。
當圖輸出之後，如果有跟原畫不協調的部分，可以將成果圖再輸入回img2img，然後用低Denoising strength再輸出一次，就能得到更一致的結果：
最後
現在已經有了很多方法可以大量隨機生成角色，配上上面第一步設定，就能大量做出人物設計圖，讓PM與美工在角色生成與溝通這環節省下大量時間，限制角色的因素，只剩下顯卡效能與電費還有設定提示詞的創意了。
下面就是一個生成大量隨機角色的方法（從13:20處開始）：
享受AI算圖的快樂吧！
進階技巧目錄：
- Stable Diffusion進階 -- 製作角色設定圖
- Stable Diffusion進階 -- 轉換線稿/漫畫稿
- Stable Diffusion進階 -- 常用網站
- Stable Diffusion進階 -- CLIP Skip 2
- Stable Diffusion進階 -- 臉崩修復
- Stable Diffusion進階 -- X/Y/Z plot
- Stable Diffusion進階 -- 提示詞矩陣
- Stable Diffusion進階 -- 練習，歡迎來到我的家鄉
- Stable Diffusion進階 -- 穿衣換衣術
- Stable Diffusion進階 -- 醒來！表情變換
- Stable Diffusion進階 -- 雷光變幻！
- Stable Diffusion進階 -- 糊臉清晰化
- Stable Diffusion進階 -- 練習，這是利息
- Stable Diffusion進階 -- 人工與工人智慧去背
- Stable Diffusion進階 -- 手部修復
- Stable Diffusion進階 -- ControlNet新功能Reference
即將進入廣告，捲動後可繼續閱讀
為什麼會看到廣告
留言0
查看全部
你可能也想看
Google News 追蹤
現代社會跟以前不同了，人人都有一支手機，只要打開就可以獲得各種資訊。過去想要辦卡或是開戶就要跑一趟銀行，然而如今科技快速發展之下，金融App無聲無息地進到你生活中。但同樣的，每一家銀行都有自己的App時，我們又該如何選擇呢？(本文係由國泰世華銀行邀約)
今天我會用不同角度帶大家看這款國泰世華CUB
嘿，大家新年快樂~ 新年大家都在做什麼呢？
跨年夜的我趕工製作某個外包設計案，在工作告一段落時趕上倒數。
然後和兩個小孩過了一個忙亂的元旦。在深夜時刻，看到朋友傳來的解籤網站，興致勃勃熬夜體驗了一下，覺得非常好玩，或許有人玩過了，但還是想寫上來分享紀錄一下~
創建虛擬角色想要賦予生動表情，或是讓歷史人物更變得栩栩如生，利用 AI 模型即可將靜態人物照片變成擁有表情的動態影像。LivePortrait AI 模型可以分析影片中的人物表情，並將其套用至靜態照片，產生具有與影片人物相同表情的動態人像。
生成式AI工具即將邁入三年，除了ChatGPT以外，也進化了許多GenAI工具，如Sora影片生成等。
你知道Stable Diffusion嗎？
從詠唱魔法師Prompts的玩家或職務，AI浪潮持續推進下，SD-WebUI並沒有停滯或被淘汰。
結果告訴了我們一件事情...
Stable Diffusion 的 Mov2Mov 套件是一個非常強大的工具，讓你可以自動化和簡化視頻轉換過程。這個套件特別適合那些希望在視頻中進行面部替換、添加配件或改變角色外觀的人。這裡是關於這個套件的一些詳細介紹：
功能和優點
自動化視頻轉換：
Mov2Mov 可以自動化視頻到
在畫漫畫的時候，常常會出現角色性格不明顯的問題，一不留神創造出多個性格類似的角色，導致出現故事發展和角色行為單一的現象。
為了避免以上的狀況，我自己使用一套小方法，基本架構如下：
你正在盯著人設撓頭抓首嗎？
你總是反覆推敲角色行動，思考筆下的劇情是否增加角色魅力？
又或者，你看著檯面上那麼多優秀的作品，優秀的角色，卻不知道怎麼自己寫一個出來？
這全都很正常，因為刻劃人物就是一件那麼困難的事情。
本篇文章介紹了透過角色造型所能紀錄的不同階層生活面相，包括從職業、配件物品和角色身上觀察到的元素。同時也提到了觀察參考圖片和繪圖流程中需要注意的事項，以及周遭人在角色創作中的重要性。
這篇要運用自動遮罩、重繪、批次的技巧，幫同一個人物更換不同背景。
自動遮罩
自動遮罩採用Segment Anything這個節點組，載入圖片後可以依指定的提示詞自動產生遮罩圖像，這邊我要更換的是背景，所以先讓AI抓出人物後，再反轉遮罩範圍輸出，為了讓重繪圖像不要過於生硬，將遮罩進行了高斯模糊。
Tensor Art 使用 Stable Diffusion 的各種模型，也能使用ControlNet 和 LoRA功能，根據使用者的輸入來文生圖、圖生圖，生成各種風格的高質量圖像，包括人像、動人的風景、創意的抽象畫等。
Stable Diffusion Online是網頁版的Stable Diffusion AI圖像生成工具，省去了繁瑣的安裝和設定步驟，可以無限生成圖片，且不用註冊就可以免費使用，更棒的是還可以商業使用，為使用者提供更便捷的圖像生成體驗。
現代社會跟以前不同了，人人都有一支手機，只要打開就可以獲得各種資訊。過去想要辦卡或是開戶就要跑一趟銀行，然而如今科技快速發展之下，金融App無聲無息地進到你生活中。但同樣的，每一家銀行都有自己的App時，我們又該如何選擇呢？(本文係由國泰世華銀行邀約)
今天我會用不同角度帶大家看這款國泰世華CUB
嘿，大家新年快樂~ 新年大家都在做什麼呢？
跨年夜的我趕工製作某個外包設計案，在工作告一段落時趕上倒數。
然後和兩個小孩過了一個忙亂的元旦。在深夜時刻，看到朋友傳來的解籤網站，興致勃勃熬夜體驗了一下，覺得非常好玩，或許有人玩過了，但還是想寫上來分享紀錄一下~
創建虛擬角色想要賦予生動表情，或是讓歷史人物更變得栩栩如生，利用 AI 模型即可將靜態人物照片變成擁有表情的動態影像。LivePortrait AI 模型可以分析影片中的人物表情，並將其套用至靜態照片，產生具有與影片人物相同表情的動態人像。
生成式AI工具即將邁入三年，除了ChatGPT以外，也進化了許多GenAI工具，如Sora影片生成等。
你知道Stable Diffusion嗎？
從詠唱魔法師Prompts的玩家或職務，AI浪潮持續推進下，SD-WebUI並沒有停滯或被淘汰。
結果告訴了我們一件事情...
Stable Diffusion 的 Mov2Mov 套件是一個非常強大的工具，讓你可以自動化和簡化視頻轉換過程。這個套件特別適合那些希望在視頻中進行面部替換、添加配件或改變角色外觀的人。這裡是關於這個套件的一些詳細介紹：
功能和優點
自動化視頻轉換：
Mov2Mov 可以自動化視頻到
在畫漫畫的時候，常常會出現角色性格不明顯的問題，一不留神創造出多個性格類似的角色，導致出現故事發展和角色行為單一的現象。
為了避免以上的狀況，我自己使用一套小方法，基本架構如下：
你正在盯著人設撓頭抓首嗎？
你總是反覆推敲角色行動，思考筆下的劇情是否增加角色魅力？
又或者，你看著檯面上那麼多優秀的作品，優秀的角色，卻不知道怎麼自己寫一個出來？
這全都很正常，因為刻劃人物就是一件那麼困難的事情。
本篇文章介紹了透過角色造型所能紀錄的不同階層生活面相，包括從職業、配件物品和角色身上觀察到的元素。同時也提到了觀察參考圖片和繪圖流程中需要注意的事項，以及周遭人在角色創作中的重要性。
這篇要運用自動遮罩、重繪、批次的技巧，幫同一個人物更換不同背景。
自動遮罩
自動遮罩採用Segment Anything這個節點組，載入圖片後可以依指定的提示詞自動產生遮罩圖像，這邊我要更換的是背景，所以先讓AI抓出人物後，再反轉遮罩範圍輸出，為了讓重繪圖像不要過於生硬，將遮罩進行了高斯模糊。
Tensor Art 使用 Stable Diffusion 的各種模型，也能使用ControlNet 和 LoRA功能，根據使用者的輸入來文生圖、圖生圖，生成各種風格的高質量圖像，包括人像、動人的風景、創意的抽象畫等。
Stable Diffusion Online是網頁版的Stable Diffusion AI圖像生成工具，省去了繁瑣的安裝和設定步驟，可以無限生成圖片，且不用註冊就可以免費使用，更棒的是還可以商業使用，為使用者提供更便捷的圖像生成體驗。