Stable Diffusion進階 -- 漸進式光影

更新於 發佈於 閱讀時間約 4 分鐘
修正後與修正光源前的對比

前言

本篇文章要討論一個在出擬真或真人類型的圖片時,常常遇到的問題,就是光源太亮。
在許多熱門模型上,由於使用太多大白天模特兒的圖片,或者攝影棚高光圖片來訓練,所以在弄出人物時,儘管場所設定在夜間,也會出現不自然的超高光,或者整個照片的光源陰影不遵照提示詞來佈局的問題。
之前介紹的 Stable Diffusion提示詞 -- 光影 Stable Diffusion進階 -- 光影控制 都是可行的光影控制方法,而本篇要針對的是更細微的控制,將已經生成的圖片重新更改光源與陰影,且產生不同程度的明暗程度讓製作者可以挑選最佳的光影成果。

方法

我們先使用txt2img生成一張在夜晚森林之中的角色圖:
(masterpiece, top quality, best quality, official art, beautiful and aesthetic:1.3), extreme detailed, Hana, fighting stance, angry, clenched teeth, floating hair, wearing white kimono and white cape, long sleeves, hand holding a wooden club \(weapon\), night, half moon, moonlight, fantasy, forest <lora:Hana:0.4>
亮過頭的夜晚圖
許多時候模型生成的圖片並不一定依照我們的想法來佈局明暗與光影,有時候是因為模型訓練時用了太多模特兒的攝影棚拍照片,或者LoRA在訓練時缺乏多樣化的光影,或者使用太多提示詞互相牽制,導致某些強烈的光影效果被取消掉。總之,在嘗試各種提示詞也無法產生想要的光影時,可以試試看利用ControlNet配上Loopback的手段來產生一整批不同明暗程度的圖片,再從裡面挑出最好的結果。
首先,在本例中,我想要在畫面中央上方製造一個月亮當作光源。我開啟任意繪圖軟體,例如GIMP,打開新畫布,選擇全黑背景,然後用畫筆弄出白色光源遮罩,將這張圖輸入到img2img裡面,提示詞則保持與原始圖一樣:
光源遮罩
接著在img2img的設定中,使用Denoising strength 0.4這樣的中等權重:
img2img設定
接著開啟ControlNet,設定兩組。第一組使用Openpose以固定圖片生成時人物的姿勢不跑掉,使用ContorlNet is more important:
ControlNet的Openpose設定
第二組的ControlNet使用canny(邊緣偵測)或者normal(法線圖)皆可,用以固定原始圖片裡面人物的形狀與表情,使用ContorlNet is more important:
ControlNet的Canny設定
最後,最重要的是Loopback的設定,藉由Loopback的循環輸入能力,我們才能將一片漆黑的基本遮罩慢慢還原出整張圖。在這邊我設定10回合,且Final denosing strength設定為0.75的高權重,在後幾回合產生較大的明暗變動:
Loopback設定

成果

一切都設定完成之後,就能來跑圖了,等十回合都跑完後,就能來挑選圖片:
從遮罩還原出圖片
可以看出一開始,AI在一片漆黑的遮罩之下只能勉強算出光源附近的人物輪廓,但隨著成果圖不斷循環輸入,圖片會越來越清晰,且陰影分佈會依照物體的相對關係和光源強弱改變。
如果是使用ControlNet的canny來固定形狀,有些強烈的陰影分界線會被採樣進來,因此干擾了光影分佈,如果是這樣,可以下載Canny的圖片抹掉這些額外的線條,或者可以改用normal來固定形狀,但可能會造成衣服樣式完全改變。
最後,我挑選了最符合我想像中的夜晚森林有月光又足夠暗的圖片,大約在第七張左右:
更改明亮與光影的成果圖
除了人物的陰影改變了,背景的森林與道路的陰影也完全不同了,更符合月光照明的氛圍,基本符合我的需求!
祝大家AI算圖愉快!
即將進入廣告,捲動後可繼續閱讀
為什麼會看到廣告
avatar-img
22.6K會員
416內容數
寫奇幻小說,畫圖,心得,各式各樣作品的故鄉。
留言0
查看全部
avatar-img
發表第一個留言支持創作者!
這篇要來探討一個建立角色穿著的手法,就是透過紙娃娃系統的概念,將裸體角色穿上衣物。
這篇要討論的主題與 Stable Diffusion進階 -- 穿衣換衣術 類似,但是要使用更穩定的方法把衣服變成自己想要的樣子。
本篇要來介紹一個很少人提到,但是我用了之後覺得非常驚艷的功能--循環輸入(Loopback)。
本篇要來討論一個很有趣的組合技巧,就是用有範圍的隨機提示詞來生成許多角色設定圖。
這篇來探索一下目前在Automatic1111底下如何控制畫面的光影。光影在AI算圖中其實難度不小,尤其是想要產生特定位置或特定效果的光影,往往要用到很多綜合手段才能做到。
最近ControlNet最新版1.222引入了新的Inpaint模型 -- Inpaint_only+lama,是一個比Inpaint_only更能推論新圖象的模型。
這篇要來探討一個建立角色穿著的手法,就是透過紙娃娃系統的概念,將裸體角色穿上衣物。
這篇要討論的主題與 Stable Diffusion進階 -- 穿衣換衣術 類似,但是要使用更穩定的方法把衣服變成自己想要的樣子。
本篇要來介紹一個很少人提到,但是我用了之後覺得非常驚艷的功能--循環輸入(Loopback)。
本篇要來討論一個很有趣的組合技巧,就是用有範圍的隨機提示詞來生成許多角色設定圖。
這篇來探索一下目前在Automatic1111底下如何控制畫面的光影。光影在AI算圖中其實難度不小,尤其是想要產生特定位置或特定效果的光影,往往要用到很多綜合手段才能做到。
最近ControlNet最新版1.222引入了新的Inpaint模型 -- Inpaint_only+lama,是一個比Inpaint_only更能推論新圖象的模型。
你可能也想看
Google News 追蹤
Thumbnail
現代社會跟以前不同了,人人都有一支手機,只要打開就可以獲得各種資訊。過去想要辦卡或是開戶就要跑一趟銀行,然而如今科技快速發展之下,金融App無聲無息地進到你生活中。但同樣的,每一家銀行都有自己的App時,我們又該如何選擇呢?(本文係由國泰世華銀行邀約) 今天我會用不同角度帶大家看這款國泰世華CUB
Thumbnail
嘿,大家新年快樂~ 新年大家都在做什麼呢? 跨年夜的我趕工製作某個外包設計案,在工作告一段落時趕上倒數。 然後和兩個小孩過了一個忙亂的元旦。在深夜時刻,看到朋友傳來的解籤網站,興致勃勃熬夜體驗了一下,覺得非常好玩,或許有人玩過了,但還是想寫上來分享紀錄一下~
Thumbnail
間接照明塑造的是整體情境效果。它創造了令人驚艷的視覺感......
Thumbnail
當我剛進入靈性修習時,對能量非常敏感,會想躲避負能量的人事物,而且遇到許多靈性圈的朋友,對能量也有近乎神經質的敏銳,讓我經常懷疑情緒排毒的自己,是不是曾不經意的用負面能量污染到別人,也盡量避開負面的情境或言語,如此便加深了人我之間的分隔對立。 然後我進入擴大療癒法以及光的實修,發現這兩門課程頻
Thumbnail
每種光線都有它特定的功用,巧妙運用這些光線,就像施展了魔法般,為作品賦予不同的情感和意境,也大大提升作品的視覺效果和感染力,今天跟你介紹八個光線提示詞,來讓作品賦予獨特的情感和意境。
Thumbnail
影子是虛幻的,所以邊線相較於實體會比較柔和,會因物體的起伏而產生起伏變化。
Thumbnail
光的關鍵字: ▪︎自然光 |Natural light ▪︎太陽光|Sunlight ▪︎晨光 | Morning light ▪︎暖光|Warm light ▪︎冷光 |Cold light ▪︎棚內光 |Studio light ▪︎電影光 | Cinematic light ▪︎賽博朋克光
Thumbnail
你可曾因為欣賞璀璨燈火下的夜景而感到浪漫不已呢?或是沉醉於夜生活的喧囂華麗而感到滿足呢? 當我們漫步在街燈下感受萬家燈火的溫暖時,幾乎忘了夜晚原本該有的樣貌,本是萬籟俱寂獨留月光與星光閃耀的夜晚,因為人類的需求與演進而大量增添了許多人造光,卻未曾想過這些非自然光對於生活在野外的動物們有著何
Thumbnail
靜物攝影的概念有點像靜物寫生, 構圖、光線、色彩、風格的經營是相似的。 採光方面分為現場環境光(如窗戶邊的自然光) 以及人工光源造景(利用閃燈、持續光等工具), 有些喜歡使用自然光拍美食的攝影師就屬於環境光源利用, 這概念有點像利用光線寫生。   當拍照現場沒有適合又好看的光源時,
Thumbnail
當我們在夜間看得見眼前的景象時, 那是光在作畫。 所以在創作夜間倒影的時候, 用的色彩明度與彩度雖然大多得降低。
Thumbnail
大家有沒有過這種經驗?就是每次想用手機拍山峰間的日出,或是想留下抬頭窺見細隙中耀眼陽光灑落的清晰逆光美感時,可能侷限於手機功能有限、或是拍攝者對於技巧運用的不熟悉,雖然整體的風景都很美,但美中不足的是拍攝的太陽光暈總是會暈開,破壞整體的美感,沒辦法拍出美美的"星芒"效果。   什麼是「星芒」
Thumbnail
燈火闌珊的後面,不知道會有什麼樣的光采。
Thumbnail
現代社會跟以前不同了,人人都有一支手機,只要打開就可以獲得各種資訊。過去想要辦卡或是開戶就要跑一趟銀行,然而如今科技快速發展之下,金融App無聲無息地進到你生活中。但同樣的,每一家銀行都有自己的App時,我們又該如何選擇呢?(本文係由國泰世華銀行邀約) 今天我會用不同角度帶大家看這款國泰世華CUB
Thumbnail
嘿,大家新年快樂~ 新年大家都在做什麼呢? 跨年夜的我趕工製作某個外包設計案,在工作告一段落時趕上倒數。 然後和兩個小孩過了一個忙亂的元旦。在深夜時刻,看到朋友傳來的解籤網站,興致勃勃熬夜體驗了一下,覺得非常好玩,或許有人玩過了,但還是想寫上來分享紀錄一下~
Thumbnail
間接照明塑造的是整體情境效果。它創造了令人驚艷的視覺感......
Thumbnail
當我剛進入靈性修習時,對能量非常敏感,會想躲避負能量的人事物,而且遇到許多靈性圈的朋友,對能量也有近乎神經質的敏銳,讓我經常懷疑情緒排毒的自己,是不是曾不經意的用負面能量污染到別人,也盡量避開負面的情境或言語,如此便加深了人我之間的分隔對立。 然後我進入擴大療癒法以及光的實修,發現這兩門課程頻
Thumbnail
每種光線都有它特定的功用,巧妙運用這些光線,就像施展了魔法般,為作品賦予不同的情感和意境,也大大提升作品的視覺效果和感染力,今天跟你介紹八個光線提示詞,來讓作品賦予獨特的情感和意境。
Thumbnail
影子是虛幻的,所以邊線相較於實體會比較柔和,會因物體的起伏而產生起伏變化。
Thumbnail
光的關鍵字: ▪︎自然光 |Natural light ▪︎太陽光|Sunlight ▪︎晨光 | Morning light ▪︎暖光|Warm light ▪︎冷光 |Cold light ▪︎棚內光 |Studio light ▪︎電影光 | Cinematic light ▪︎賽博朋克光
Thumbnail
你可曾因為欣賞璀璨燈火下的夜景而感到浪漫不已呢?或是沉醉於夜生活的喧囂華麗而感到滿足呢? 當我們漫步在街燈下感受萬家燈火的溫暖時,幾乎忘了夜晚原本該有的樣貌,本是萬籟俱寂獨留月光與星光閃耀的夜晚,因為人類的需求與演進而大量增添了許多人造光,卻未曾想過這些非自然光對於生活在野外的動物們有著何
Thumbnail
靜物攝影的概念有點像靜物寫生, 構圖、光線、色彩、風格的經營是相似的。 採光方面分為現場環境光(如窗戶邊的自然光) 以及人工光源造景(利用閃燈、持續光等工具), 有些喜歡使用自然光拍美食的攝影師就屬於環境光源利用, 這概念有點像利用光線寫生。   當拍照現場沒有適合又好看的光源時,
Thumbnail
當我們在夜間看得見眼前的景象時, 那是光在作畫。 所以在創作夜間倒影的時候, 用的色彩明度與彩度雖然大多得降低。
Thumbnail
大家有沒有過這種經驗?就是每次想用手機拍山峰間的日出,或是想留下抬頭窺見細隙中耀眼陽光灑落的清晰逆光美感時,可能侷限於手機功能有限、或是拍攝者對於技巧運用的不熟悉,雖然整體的風景都很美,但美中不足的是拍攝的太陽光暈總是會暈開,破壞整體的美感,沒辦法拍出美美的"星芒"效果。   什麼是「星芒」
Thumbnail
燈火闌珊的後面,不知道會有什麼樣的光采。