Stable Diffusion練習,夢歌

更新於 發佈於 閱讀時間約 4 分鐘
哈娜與巫娜・莫瑞

哈娜與巫娜・莫瑞

明明才剛認識,卻好像交心許久。
明明連語言都不通,卻可以靠寥寥幾個字與比手畫腳談天說地。
明明文化與外表南轅北轍,但是情感與才思卻如此相通。

她們兩個好像是兩本仕女筆記,互相敞開最害羞的內頁讓對方暢覽。儘管雙方以不同的語言書寫秘密,但頁緣畫滿了各種小花小草小圖示與表情,書寫的筆跡快慢粗細不經意透露了心情與煩惱。

這就是心靈相通的感覺嗎?儘管氤氳水氣冷得哈娜屁股都要結凍了,她依然感覺被幸福醺醉了,臉頰暖烘烘的。

從三月開始到現在,學習AI算圖差不多半年。這半年來,遇過最困難的挑戰,就是如何建構多人構圖。

與單人構圖不同,多人構圖除了要考慮視角、位置、光影、透視與色調等問題,多人肢體與眼神表情的互動也是要考慮的重點。如果需要特定角色,而非隨機角色,那就要使用LoRA來確保人物特徵是正確的。在多人構圖中又會造成LoRA污染其他角色。之前可以使用諸如Composable LoRA(Latent Couple)或者Regional Prompt等外掛插件來幫忙。但是隨著A1111不斷更新,許多插件都中止更新,無法再用。因此,我們必須摸索一些不靠插件,只靠最基本的LoRA加上ControlNet來達到多人圖的手法。

剛好,這半年來跑的各種小說概念插圖裡面,我最滿意的一張圖,就是一張雙人構圖,且只使用了LoRA加上ControlNet來達到的。

這張圖我用在了:

夢歌(四之一) -- Stable Diffusion繪製

夢歌(四之二) -- Stable Diffusion繪製

夢歌(四之三) -- Stable Diffusion繪製

夢歌(四之四) -- Stable Diffusion繪製

之中。

整張圖的建構步驟,可以用下面這個GIF動態檔來簡述:

繪圖過程動態

繪圖過程動態

繪圖步驟

首先,我需要生出一張最基本的雙人openpose姿勢圖,無論是使用人偶App來擺出這樣的姿勢,或者使用真實照片在擷取姿勢都可以,在我的例子裡,我使用真人相片,然後使用dw_openpose_full這個前置處理器來擷取姿勢:

OpenPose姿勢圖

OpenPose姿勢圖

接著使用適當的提示詞,例如2girls。配上ControlNet的openpose來引導AI生出一個姿勢是正確的雙人互動基礎圖:

基礎圖片

基礎圖片

接著,由於不想靠任何分區處理外掛來生圖,我將這張基礎圖片換到inpaint裡面繼續加工。先選擇左邊的人物,然後使用針對角色的提示詞以及角色的特定LoRA,將人物轉換成我要的人物。

請記住將ControlNet的openpose也設定好,尤其要注意,因為我已經給了骨架圖,所以前置處理器要設定成none,要不然人物的姿勢會跑掉:

ControlNet的openpose設定

ControlNet的openpose設定

將第一個人物繪製完成後,圖會變成這樣:

左邊人物繪製完畢

左邊人物繪製完畢

依樣畫葫蘆,將右邊的人物也用inpaint換成我們要的角色:

左右兩邊人物都已置換完畢

左右兩邊人物都已置換完畢

在重繪時,denoising strength都要保持大概0.75到0.8的高強度,才能順利重繪成完全不同的角色。

接下來是細節處理。我使用inpaint sketch功能:

Stable Diffusion基礎 -- 塗鴉(Sketch)

一樣使用高強度的denoising strength來重繪右邊人物的服裝(從華麗的服裝變成簡單的白袍),以及左邊人物的表情(從露齒笑容變成微笑):

服裝與表情置換完畢

服裝與表情置換完畢

最後,開動繪圖軟體,將背景塗上霧氣以營造符合小說內容的氛圍,再將塗好背景霧氣的圖拿回A1111裡面以低denoising strength重新塗佈,讓整體圖片更一致:

完成圖

完成圖

接下來剩下的就是繼續修正小細節,例如改變眼珠的位置讓兩人彼此互視(意外地困難!),將圖片放大之後再修正更多不協調之處等小問題。圖片就完成了!

結語

隨著A1111或ComfyUI等AI算圖工具的演進,很多插件外掛作者會因為種種因素而中斷開發,因此在學習AI算圖時,除了依靠插件外掛之外,最好還是學習更多基本功,讓自己可以不依賴插件外掛而作圖。

這也是我為何很少介紹各種插件外掛的原因。很有可能這個版本非常好用的外掛,到了下一個版本之後就不再更新而無法使用。


祝大家AI算圖愉快!

留言
avatar-img
留言分享你的想法!
麻吉-avatar-img
2023/10/12
您設計出來的人物圖片,都好傳神又討喜。
子不語-avatar-img
發文者
2023/10/13
麻吉 謝謝!我也很喜歡這張圖。大概是到目前為止最喜歡的。
氣泡水-avatar-img
2023/10/12
好複雜又專業的修改過程,要完成一張滿意的圖片,真的很不容易。“基礎圖片” 的背景很美,尤其左邊的部分,有種江南水鄉的意境。
子不語-avatar-img
發文者
2023/10/13
氣泡水 其實AI很不聽話,我一直要他產生深山野嶺,但是他一直給我小樓憑欄⋯⋯😄
熟齡文青-avatar-img
2023/10/13
引言中仕女筆記的描寫好細膩!
子不語-avatar-img
發文者
2023/10/13
熟齡文青 感謝稱讚! 那幾句磨了好幾天,換了好幾個不同的句子才定型。
築夢人-avatar-img
2023/10/28
大工程啊,不比寫作來得輕鬆呢。您的AI生圖及文字表現真是相輔相成,功力到位,真教本人這位單純只會使用文字的寫作者自嘆遠遠不如。
子不語-avatar-img
發文者
2023/10/28
築夢人 其實我覺得畫這些AI圖還比較簡單,很多時候跟煮菜很像,煮著煮著就了解一些,而寫小說才是難的,要顧的方方面面太多了。
avatar-img
子不語怪・力・亂・神
28.0K會員
430內容數
寫奇幻小說,畫圖,心得,各式各樣作品的故鄉。
2024/08/10
最近一直在嘗試把一個夢想許久的小說插畫做出來。 我想要做出一個大魄力的畫面,敘述小說女主角大開殺戒的那一瞬間。 測試了三個不同的版本,終於給我做出來了!
Thumbnail
2024/08/10
最近一直在嘗試把一個夢想許久的小說插畫做出來。 我想要做出一個大魄力的畫面,敘述小說女主角大開殺戒的那一瞬間。 測試了三個不同的版本,終於給我做出來了!
Thumbnail
2024/07/15
最近在嘗試使用不同的AI生圖方式混合出圖的方式,採用A平台的優點,並用B平台後製的手法截長補短,創造出自己更想要的小說場景,效果不錯,現在以這張圖為例,來講一下我的製作步驟。
Thumbnail
2024/07/15
最近在嘗試使用不同的AI生圖方式混合出圖的方式,採用A平台的優點,並用B平台後製的手法截長補短,創造出自己更想要的小說場景,效果不錯,現在以這張圖為例,來講一下我的製作步驟。
Thumbnail
2024/06/18
最近有空時就在看如何使用AI作圖的方式製作出有魄力的動作與構圖,恰巧在Civitai這個AI作圖網站上找到了一些有趣的人物姿態,因此發想了一些構圖,依照這些構想做出來的圖效果還算可以接受,因此在這邊記錄一下過程與步驟。
Thumbnail
2024/06/18
最近有空時就在看如何使用AI作圖的方式製作出有魄力的動作與構圖,恰巧在Civitai這個AI作圖網站上找到了一些有趣的人物姿態,因此發想了一些構圖,依照這些構想做出來的圖效果還算可以接受,因此在這邊記錄一下過程與步驟。
Thumbnail
看更多
你可能也想看
Thumbnail
大家好,我是一名眼科醫師,也是一位孩子的媽 身為眼科醫師的我,我知道視力發展對孩子來說有多關鍵。 每到開學季時,診間便充斥著許多憂心忡忡的家屬。近年來看診中,兒童提早近視、眼睛疲勞的案例明顯增加,除了3C使用過度,最常被忽略的,就是照明品質。 然而作為一位媽媽,孩子能在安全、舒適的環境
Thumbnail
大家好,我是一名眼科醫師,也是一位孩子的媽 身為眼科醫師的我,我知道視力發展對孩子來說有多關鍵。 每到開學季時,診間便充斥著許多憂心忡忡的家屬。近年來看診中,兒童提早近視、眼睛疲勞的案例明顯增加,除了3C使用過度,最常被忽略的,就是照明品質。 然而作為一位媽媽,孩子能在安全、舒適的環境
Thumbnail
我的「媽」呀! 母親節即將到來,vocus 邀請你寫下屬於你的「媽」故事——不管是紀錄爆笑的日常,或是一直想對她表達的感謝,又或者,是你這輩子最想聽她說出的一句話。 也歡迎你曬出合照,分享照片背後的點點滴滴 ♥️ 透過創作,將這份情感表達出來吧!🥹
Thumbnail
我的「媽」呀! 母親節即將到來,vocus 邀請你寫下屬於你的「媽」故事——不管是紀錄爆笑的日常,或是一直想對她表達的感謝,又或者,是你這輩子最想聽她說出的一句話。 也歡迎你曬出合照,分享照片背後的點點滴滴 ♥️ 透過創作,將這份情感表達出來吧!🥹
Thumbnail
筆者最近開啟連載的小說《M.O.N》是以AI、仿生人、安寧療護為主軸的科幻短篇。書封,按照慣例,是自製;也按照慣例,使用了Stable Diffusion (SD)。
Thumbnail
筆者最近開啟連載的小說《M.O.N》是以AI、仿生人、安寧療護為主軸的科幻短篇。書封,按照慣例,是自製;也按照慣例,使用了Stable Diffusion (SD)。
Thumbnail
從三月開始到現在,學習AI算圖差不多半年。這半年來,遇過最困難的挑戰,就是如何建構多人構圖。
Thumbnail
從三月開始到現在,學習AI算圖差不多半年。這半年來,遇過最困難的挑戰,就是如何建構多人構圖。
Thumbnail
在寫第三篇時,發生了一個有趣的事情,促使我大改第三篇,順便連第四篇與之後的大綱都要有一部分的修正,而這個經驗讓我非常受用,所以在這邊記錄一下。 在寫第三篇時,發生了一個有趣的事情,促使我大改第三篇,順便連第四篇與之後的大綱都要有一部分的修正,而這個經驗讓我非常受用,所以在這邊記錄一下。
Thumbnail
在寫第三篇時,發生了一個有趣的事情,促使我大改第三篇,順便連第四篇與之後的大綱都要有一部分的修正,而這個經驗讓我非常受用,所以在這邊記錄一下。 在寫第三篇時,發生了一個有趣的事情,促使我大改第三篇,順便連第四篇與之後的大綱都要有一部分的修正,而這個經驗讓我非常受用,所以在這邊記錄一下。
Thumbnail
本篇要來分享一下如何用之前學到的技巧來製作有透視關係的多人圖。 這張圖用於我自己的小說 哈娜與修的談判的概念插畫,所以對於角色的表情、姿勢與攝影角度有一定的要求,不是光靠提示詞就能輕鬆生成,最省時間的方法就是使用人偶生圖法來產生姿勢固定的圖。
Thumbnail
本篇要來分享一下如何用之前學到的技巧來製作有透視關係的多人圖。 這張圖用於我自己的小說 哈娜與修的談判的概念插畫,所以對於角色的表情、姿勢與攝影角度有一定的要求,不是光靠提示詞就能輕鬆生成,最省時間的方法就是使用人偶生圖法來產生姿勢固定的圖。
Thumbnail
本篇要來分享一下製作 (漫畫)姊妹會秘儀時用到的各種AI生成技巧。 很多時候,為了將心中一個想法實現,必須用上許多自己原先不會的技巧,雖然過程是痛苦的、掙扎的,但是這樣一點一滴邁向終點,當到達時,就會發現收穫的不只是成果,還有一路上學到的新技能。
Thumbnail
本篇要來分享一下製作 (漫畫)姊妹會秘儀時用到的各種AI生成技巧。 很多時候,為了將心中一個想法實現,必須用上許多自己原先不會的技巧,雖然過程是痛苦的、掙扎的,但是這樣一點一滴邁向終點,當到達時,就會發現收穫的不只是成果,還有一路上學到的新技能。
Thumbnail
這篇要來討論,我們是否能靠著一張圖,就能鍛鍊出LoRA。
Thumbnail
這篇要來討論,我們是否能靠著一張圖,就能鍛鍊出LoRA。
Thumbnail
這次來用一些好用的手法,達到在Stable Diffusion裡面畫出誇張姿勢的方法。
Thumbnail
這次來用一些好用的手法,達到在Stable Diffusion裡面畫出誇張姿勢的方法。
Thumbnail
奮戰整整三天,終於可以讓妳在任何模組上出現,這感覺真好。😊 來說說為何使用LoRA,還有它的一些特性。
Thumbnail
奮戰整整三天,終於可以讓妳在任何模組上出現,這感覺真好。😊 來說說為何使用LoRA,還有它的一些特性。
Thumbnail
這一篇是Lora系列文的最後一篇,講一下如何使用Lora,如果你已經懂的使用Lora那可以跳過這一篇。
Thumbnail
這一篇是Lora系列文的最後一篇,講一下如何使用Lora,如果你已經懂的使用Lora那可以跳過這一篇。
Thumbnail
這次來講一下在stable diffusion webui中如何自己訓練Lora模型。Lora模型的訓練算是有點複雜,我一樣試著儘量講的淺顯易懂,它不難,只是步驟多而已。有了Lora之後你可以儘情的畫出你的偶像,你的夢中情人,你珍藏的動漫人物,還有你所有想畫但畫不出來的人。
Thumbnail
這次來講一下在stable diffusion webui中如何自己訓練Lora模型。Lora模型的訓練算是有點複雜,我一樣試著儘量講的淺顯易懂,它不難,只是步驟多而已。有了Lora之後你可以儘情的畫出你的偶像,你的夢中情人,你珍藏的動漫人物,還有你所有想畫但畫不出來的人。
追蹤感興趣的內容從 Google News 追蹤更多 vocus 的最新精選內容追蹤 Google News