Stable Diffusion進階 -- 人偶生圖(二)

更新於 發佈於 閱讀時間約 5 分鐘
人偶生圖法範例

人偶生圖法範例

前言

在上一篇文章中,我使用人偶圖產出了一個姿勢正確,但是手指錯亂且臉型崩潰的半成品圖,這一篇我要繼續修正這些問題,得到一個草稿圖,再使用這個草稿製作大張的完成圖。

步驟

需要修正的半成品

需要修正的半成品

手修正

對於需要修正的手指,可以用之前在 Stable Diffusion進階 -- Loopback手部修復 提到的手法來修復,但是在人偶生成法裡,有一個訣竅可以更簡便地做出修補,就是利用最初幾回合生成的圖片來修復。

由於這一系列的圖片都是由同一組姿勢控制設定所生成,照理來說所有的手部姿勢、光影與位置應該都是類似的,所以我們可以打開檔案夾,找出一個手部還沒崩壞的圖片,在繪圖軟體中開啟特意挑選的手部完好圖,以及之前產生的半成品圖,將完好的手部擷取下來,接肢到半成品圖上,再使用塗抹或其他工具將明顯有色差的部分塗抹銜接起來,就能得到一個肢體形狀正確但色澤不一樣的肢體修復圖:

接肢修復圖

接肢修復圖

此時如果有必要,可以使用下列的方法修正色差。但如果只是要提取邊線稿,這樣的修復就足夠了,因為邊線草稿不在乎色澤。

首先將圖輸入img2img,這樣才能讓整個人物的顏色同時均勻化,使用Denoising strength為0.3的低度權重,確保跑圖時不會讓手又變形了:

img2img的設定

img2img的設定

我曾經試著使用inpaint只針對手部來重繪,但效果非常不穩定,常常手臂的顏色與身體相差太多,所以用img2img來讓全身膚色一齊改變反而能得到較穩定的結果。

接著是ControlNet的設定。第一個ControlNet依然使用openpose的設定,與上一回人偶生圖時一樣不變,但是第二個ControlNet必須從depth或normal改換成canny,且使用已經修正好的半成品圖當作來源。而Control weight強化到1,這樣才能保證生圖時手部形狀不變,而只變膚色:

第二組ControlNet使用canny,且圖換成半成品圖,權重改回1

第二組ControlNet使用canny,且圖換成半成品圖,權重改回1

接著設定Loopback的連續輸入,在這邊Final denoising strength可以試試0.3到0.5的強度,讓全身變形的幅度限制在顏色與花紋等細節,而身體姿勢由於低權重與ControlNet鉗制的關係,可以維持相當的穩定度:

Loopback設定

Loopback設定

這樣開始跑圖,通常在前幾張就能得到很不錯的成果了:

手部色澤修正好的草稿圖

手部色澤修正好的草稿圖

草稿生圖

在修正好所有明顯問題之後,這就是一張可以拿來繼續生圖的草稿了。有好幾種方法可以繼續生成完成圖:

  1. 如果這是某個大構圖的其中一個角色,就可以將該圖簡單去背之後組裝到其他圖上。
  2. 如果這張圖本身就是完成圖,接下來可以去背將黑色的部分清除,再填上底色,然後使用一樣的ControlNet設定搭配高強度的Denosing strength跑圖,就能產生真正的背景畫面。
  3. 如果這張圖我只需要線稿的部分,色澤不是我顧慮的地方,就可以將這張草稿圖當作是txt2img內ControlNet設定的canny以及depth的來源來產生大圖。

下面這張成果圖就是使用該草稿圖當作ControlNet的canny來源,跑txt2img輸出的成品:

成果圖

成果圖

臉修正

另一個問題是人物的臉。由於從人偶產生人物圖片時,頭型會受到原始人偶圖的頭型限制,所以臉型都很有可能怪怪的。這時候最好的做法就是將圖放大之後解除ControlNet的設定,只留下Openpose保留五官的位置不變,然後使用inpaint針對頭部重繪,這樣就可以得到不錯的頭臉與五官。

結論

人偶生圖法的步驟顯然比其他方法複雜、容易出錯,但它也是我目前固定角色姿勢最穩定,最能得到預期結果的方法,在一些有嚴格動作限制的概念插畫與漫畫電影分鏡稿裡面,當一般提示詞與簡單的ControlNet都無法滿足時,這可能是最能引導AI畫出你想要的構圖與動態的方法。

人偶生圖法範例

人偶生圖法範例

人偶生圖法用於多人構圖

人偶生圖法用於多人構圖

利用人偶生圖法與繪圖軟體修改手指

利用人偶生圖法與繪圖軟體修改手指

人偶生圖法範例

人偶生圖法範例

祝大家AI算圖愉快!


留言
avatar-img
留言分享你的想法!
avatar-img
子不語怪・力・亂・神
28.9K會員
430內容數
寫奇幻小說,畫圖,心得,各式各樣作品的故鄉。
2024/04/11
今天要聊聊一個我最近AI作圖時常用的手法,就是使用真實世界的照片拼接縫合進AI生產的圖片後,補完AI作圖常出現的缺陷(歪曲的武器、錯誤的肢體姿勢、手指錯誤)。 使用這個方法,可以讓AI更貼近我所需要的完成圖,且少了很多用繪圖軟體修修補補的時間。
Thumbnail
2024/04/11
今天要聊聊一個我最近AI作圖時常用的手法,就是使用真實世界的照片拼接縫合進AI生產的圖片後,補完AI作圖常出現的缺陷(歪曲的武器、錯誤的肢體姿勢、手指錯誤)。 使用這個方法,可以讓AI更貼近我所需要的完成圖,且少了很多用繪圖軟體修修補補的時間。
Thumbnail
2023/10/15
最近這幾天都在玩Stable Diffusion近期最火紅的外掛 -- AnimatedDiff。最近加上了prompt travel這個功能,加上新的v2模型讓整體畫面變得很穩定,所以一玩下去驚為天人,決定好好研究這個東西怎麼運作。
Thumbnail
2023/10/15
最近這幾天都在玩Stable Diffusion近期最火紅的外掛 -- AnimatedDiff。最近加上了prompt travel這個功能,加上新的v2模型讓整體畫面變得很穩定,所以一玩下去驚為天人,決定好好研究這個東西怎麼運作。
Thumbnail
2023/10/05
本篇要來解說一個最近新增的ControlNet前置處理器dw_openpose_full,如何使用它來快速修正爛掉的雙手手指。 這些方法的基礎都是使用實際的參考物,例如人偶網站的手,或者手指姿勢網站的手姿勢圖片來覆蓋掉原本的手,
Thumbnail
2023/10/05
本篇要來解說一個最近新增的ControlNet前置處理器dw_openpose_full,如何使用它來快速修正爛掉的雙手手指。 這些方法的基礎都是使用實際的參考物,例如人偶網站的手,或者手指姿勢網站的手姿勢圖片來覆蓋掉原本的手,
Thumbnail
看更多
你可能也想看
Thumbnail
「欸!這是在哪裡買的?求連結 🥺」 誰叫你太有品味,一發就讓大家跟著剁手手? 讓你回購再回購的生活好物,是時候該介紹出場了吧! 「開箱你的美好生活」現正召喚各路好物的開箱使者 🤩
Thumbnail
「欸!這是在哪裡買的?求連結 🥺」 誰叫你太有品味,一發就讓大家跟著剁手手? 讓你回購再回購的生活好物,是時候該介紹出場了吧! 「開箱你的美好生活」現正召喚各路好物的開箱使者 🤩
Thumbnail
介紹朋友新開的蝦皮選物店『10樓2選物店』,並分享方格子與蝦皮合作的分潤計畫,註冊流程簡單,0成本、無綁約,推薦給想增加收入的讀者。
Thumbnail
介紹朋友新開的蝦皮選物店『10樓2選物店』,並分享方格子與蝦皮合作的分潤計畫,註冊流程簡單,0成本、無綁約,推薦給想增加收入的讀者。
Thumbnail
本篇要來解說一個最近新增的ControlNet前置處理器dw_openpose_full,如何使用它來快速修正爛掉的雙手手指。 這些方法的基礎都是使用實際的參考物,例如人偶網站的手,或者手指姿勢網站的手姿勢圖片來覆蓋掉原本的手,
Thumbnail
本篇要來解說一個最近新增的ControlNet前置處理器dw_openpose_full,如何使用它來快速修正爛掉的雙手手指。 這些方法的基礎都是使用實際的參考物,例如人偶網站的手,或者手指姿勢網站的手姿勢圖片來覆蓋掉原本的手,
Thumbnail
本篇要解說一個用ControlNet加上Loopback來達到修正壞掉的手部姿勢的方法。這個方法與之前寫過的 Stable Diffusion進階 -- 手部修復 最大的不同點是,要求更高一些的繪圖軟體技巧,以及使用ControlNet來監控修復的完成度。
Thumbnail
本篇要解說一個用ControlNet加上Loopback來達到修正壞掉的手部姿勢的方法。這個方法與之前寫過的 Stable Diffusion進階 -- 手部修復 最大的不同點是,要求更高一些的繪圖軟體技巧,以及使用ControlNet來監控修復的完成度。
Thumbnail
這篇討論一個常見的問題:如何修復修補錯亂的手部姿勢。
Thumbnail
這篇討論一個常見的問題:如何修復修補錯亂的手部姿勢。
Thumbnail
下面是Stable Diffusion常用提示詞中的負面提示詞,用於Automatic1111的Negative Prompt。 要注意的是,不是每個提示詞都要加。
Thumbnail
下面是Stable Diffusion常用提示詞中的負面提示詞,用於Automatic1111的Negative Prompt。 要注意的是,不是每個提示詞都要加。
Thumbnail
無論是軟體操作或是手工加工,面對具備複雜起伏與連續弧面的造型時,所需要的並不是無止盡試誤的耐心─而是細膩的觀察與統整。 從如何拆解塊面到規劃相關製作流程;自量測撇步到轉換紙板樣品的技巧,最完整的解面思路與連續保險的維持可修正的GK複製件手法,用於穩定機身不對稱的修正用造型裙甲、現在抵達!
Thumbnail
無論是軟體操作或是手工加工,面對具備複雜起伏與連續弧面的造型時,所需要的並不是無止盡試誤的耐心─而是細膩的觀察與統整。 從如何拆解塊面到規劃相關製作流程;自量測撇步到轉換紙板樣品的技巧,最完整的解面思路與連續保險的維持可修正的GK複製件手法,用於穩定機身不對稱的修正用造型裙甲、現在抵達!
Thumbnail
STEP1. 首先選取到要成為臉的二橢圓進行『相加』並填上漸層,使用漸層工具調整漸層位置與範圍。 接著繼續為要成為頭髮與耳朵的橢圓填上漸層,同樣使用漸層工具調整漸層位置與範圍。 STEP2. 繼續為要成為眼睛的橢圓進行填色,二漸層橢圓的漸層中心,外部的較靠下方、內部的較靠上方,讓眼珠顏色更有層
Thumbnail
STEP1. 首先選取到要成為臉的二橢圓進行『相加』並填上漸層,使用漸層工具調整漸層位置與範圍。 接著繼續為要成為頭髮與耳朵的橢圓填上漸層,同樣使用漸層工具調整漸層位置與範圍。 STEP2. 繼續為要成為眼睛的橢圓進行填色,二漸層橢圓的漸層中心,外部的較靠下方、內部的較靠上方,讓眼珠顏色更有層
Thumbnail
造型、繼續前進! 繼承了前章大腿殼系列的基本技巧,將操作聯合更上層樓!如何從設計圖中取樣相似構造統合、活用補土與膠板適合的減法製作優勢,聚合箱型、進氣葉與漸變自由弧度坡等多重造型,全於本回完成!
Thumbnail
造型、繼續前進! 繼承了前章大腿殼系列的基本技巧,將操作聯合更上層樓!如何從設計圖中取樣相似構造統合、活用補土與膠板適合的減法製作優勢,聚合箱型、進氣葉與漸變自由弧度坡等多重造型,全於本回完成!
Thumbnail
承接前回、大腿裝甲的製作進入集成與精修的篇章! 面對複雜的精修需求,該如何活用假組冶具提供的快拆便利性、分析造型關連並一一攻克製作的難關?完整解構概念造型付諸實踐,多段連續的【腿部製作篇】:大腿製作系列、迎來堂堂完結!
Thumbnail
承接前回、大腿裝甲的製作進入集成與精修的篇章! 面對複雜的精修需求,該如何活用假組冶具提供的快拆便利性、分析造型關連並一一攻克製作的難關?完整解構概念造型付諸實踐,多段連續的【腿部製作篇】:大腿製作系列、迎來堂堂完結!
Thumbnail
在打好了上身與下腰的段落後,製作的進度、邁入連結上下段落的中段! 從事前評估、雛型搭建、零件干涉切除、密合度微調到假組,啟用段接蒙皮法構成的中腰篇,將帶來製作者亟需、充滿叮嚀的細緻連貫大全! 還在猶豫是否要訂閱嗎?掌握那些確實會影響成果的製作細節,從即刻訂閱開始!
Thumbnail
在打好了上身與下腰的段落後,製作的進度、邁入連結上下段落的中段! 從事前評估、雛型搭建、零件干涉切除、密合度微調到假組,啟用段接蒙皮法構成的中腰篇,將帶來製作者亟需、充滿叮嚀的細緻連貫大全! 還在猶豫是否要訂閱嗎?掌握那些確實會影響成果的製作細節,從即刻訂閱開始!
Thumbnail
手工原型的製作以簡至繁為步進。 在本回的教學中,大頭老師將針對上回完成的巴力中胸箱形象上和左右側拓張,完成頸部基座與上胸口的封閉粗造型及進氣道的基本外觀。 如何處理複雜的圖樣取得製作粗形所需的參數、鏡射製作零件的外觀?內容盡在本回中分曉。
Thumbnail
手工原型的製作以簡至繁為步進。 在本回的教學中,大頭老師將針對上回完成的巴力中胸箱形象上和左右側拓張,完成頸部基座與上胸口的封閉粗造型及進氣道的基本外觀。 如何處理複雜的圖樣取得製作粗形所需的參數、鏡射製作零件的外觀?內容盡在本回中分曉。
追蹤感興趣的內容從 Google News 追蹤更多 vocus 的最新精選內容追蹤 Google News