Stable Diffusion進階 -- 臉崩修復

更新於 發佈於 閱讀時間約 4 分鐘

正文

通常我們在Stable Diffusion用特化的模組輸出人物正面肖像圖時,會得到很好的結果,例如一個典型的512X512圖片,只要正面提示詞用得夠多,就能產生出不錯的正面大臉:
512x512臉部肖像
但如果我們想要用這些模組來輸出人物的全身像,人物的臉過小,在畫面上會呈現崩潰的型態,例如下面這張,我用了一模一樣的面部提示詞,但讓人物騎在馬上,畫面就變成了:
 512X768的全身像,臉崩了
很明顯,整張畫面馬匹沒問題,衣服沒問題,光影沒問題,但是臉怎麼像是被流星鎚打過一樣呢?
這其實是因為,人腦是一個高超的面部判別器,可以在0.1秒之內辨別這張臉的瑕疵與不對稱。但是生成AI在訓練時並沒有針對遠方的臉做太多對抗訓練,對AI來說,臉上五官偏移一兩個像素一樣可以通過判別器的檢驗,但是這並逃不過人眼的美感鑑別。
那麼我們要怎麼修補這些崩掉的人臉呢?

解法

最簡單的方法就是將那些臉崩的圖片拉進Automatic1111的Extras標籤,裡面有個智慧放大功能,只要選擇適當的放大模組,就能自動修臉,而且也不用放太大,只要兩倍就效果卓越:
放大圖片功能
各種放大模組都有自己的強項,而我個人最喜歡的是很著名的4x-UltraSharp這個模組,可以在這個網址下載:
下載之後放進models/ESRGAN/目錄底下,再重新啟動Automatic1111就能選擇了。
之前臉崩的圖片智慧放大之後,效果就好了不少:
兩倍放大之後,臉好了不少
但是這樣的放大,其實並沒有照著你的提示詞來修改,而是靠模組自己的特性發揮,所以進化的美顏不一定符合你的想法,在這種時候,就要請出Inpaint來精細發揮了!
將圖傳進Inpaint標籤中,將你指定的正反面提示詞都打上去,用圈選工具將整張臉都選起來,在選單裡面選擇Inpaint Area: Only Masked,將Denoising strength調整在0.4以下,按下Generate來生成。
由於Inpaint Area被限制在Only Masked,Stable Diffusion會將面部先特意放大,再開始依照你的提示詞重繪。由於此時面部被放大到跟肖像畫一樣的程度,所以可以用最精細的方法繪畫,畫完之後再縮小鑲嵌回原畫中,就能做到非常高畫質的面部細節:
inpaint之後,眼睛與光影更細緻了
在這樣的修正下,不只是眼睛顏色重新還原到我指定的顏色,光影也更加仔細,面部線條更柔和,連斗篷上的打結也完美呈現出來。
本方法修正面部的效果卓越,但是用在其他肢體,例如手指或腳趾就完全不行,通常越修越糟糕,還不如自己拿起Photoshop或GIMP修圖來得快。
祝大家算圖快樂!

參照


進階技巧目錄:
為什麼會看到廣告
avatar-img
22.4K會員
413內容數
寫奇幻小說,畫圖,心得,各式各樣作品的故鄉。
留言0
查看全部
avatar-img
發表第一個留言支持創作者!
當我在civitai上面逛模組,發現美圖時,都會把這張圖的提示詞複製下來玩玩看。有些圖會有額外的參數,其中最常看到的就是CLIP Skip 2這個東西。
今天來看看我們在使用Stable Diffusion時,常用的幾個網站。
前言 今天來分享如何把一張彩色圖片轉換成一張漫畫風格的黑白線稿的方法。 例如我想把一張水彩稿,或者一張照片轉換成黑白漫畫稿,不只是簡單地把一張圖換成灰階,而是連線條與陰影都要是漫畫風格。
今天要來講的,是如何使用Stable Diffusion來製作角色設定圖。 經過了好幾次的嘗試之後,我找出了一個最穩定出圖,且步驟最少的方法。
當我在civitai上面逛模組,發現美圖時,都會把這張圖的提示詞複製下來玩玩看。有些圖會有額外的參數,其中最常看到的就是CLIP Skip 2這個東西。
今天來看看我們在使用Stable Diffusion時,常用的幾個網站。
前言 今天來分享如何把一張彩色圖片轉換成一張漫畫風格的黑白線稿的方法。 例如我想把一張水彩稿,或者一張照片轉換成黑白漫畫稿,不只是簡單地把一張圖換成灰階,而是連線條與陰影都要是漫畫風格。
今天要來講的,是如何使用Stable Diffusion來製作角色設定圖。 經過了好幾次的嘗試之後,我找出了一個最穩定出圖,且步驟最少的方法。
你可能也想看
Google News 追蹤
Thumbnail
現代社會跟以前不同了,人人都有一支手機,只要打開就可以獲得各種資訊。過去想要辦卡或是開戶就要跑一趟銀行,然而如今科技快速發展之下,金融App無聲無息地進到你生活中。但同樣的,每一家銀行都有自己的App時,我們又該如何選擇呢?(本文係由國泰世華銀行邀約) 今天我會用不同角度帶大家看這款國泰世華CUB
Thumbnail
嘿,大家新年快樂~ 新年大家都在做什麼呢? 跨年夜的我趕工製作某個外包設計案,在工作告一段落時趕上倒數。 然後和兩個小孩過了一個忙亂的元旦。在深夜時刻,看到朋友傳來的解籤網站,興致勃勃熬夜體驗了一下,覺得非常好玩,或許有人玩過了,但還是想寫上來分享紀錄一下~
Thumbnail
本文下方連結的文章,利用Stable Diffusion生成512 * 512大小的圖片。 輸入的文字是 dog flying in space,此模型需輸入英文句子才會準確生成。 參考文獻 連結該作者在Hugging Face公開的模型去做使用。 本文是在Colab上執行。
Thumbnail
創建虛擬角色想要賦予生動表情,或是讓歷史人物更變得栩栩如生,利用 AI 模型即可將靜態人物照片變成擁有表情的動態影像。LivePortrait AI 模型可以分析影片中的人物表情,並將其套用至靜態照片,產生具有與影片人物相同表情的動態人像。
Thumbnail
Enhance This HiDiffusion SDXL是一個AI模型,結合HiDiffusion和SDXL兩種圖像生成模型,可以根據既有影像和文字描述生成新的圖像,可用來提高圖像解析度、修復瑕疵、轉換風格和自由創造新的圖像。
Thumbnail
DeepSwapper 是一個免費的線上AI換臉工具,可以輕鬆實現出色的換臉效果,提供DeepSwapper的操作方法和實測範例,實測結果展示了戴眼鏡的照片、各種角度和正面照都能完美呈現。
Thumbnail
隨著人工智能技術的發展,AI 繪圖已經變得常見。Fast Stable Diffusion XL on TPUv5e 是在 Hugging Face 平臺上建立的演示模型,使用 TPU v5e 運行 SDXL 模型,大幅提高了圖像生成速度,生成一張 1024x1024 圖像只需約 10 秒。
Thumbnail
現AI時代我們常見的生成影像是如何製作出來的,或許你已經開始熟悉AI“假臉”的風格。但由于現在網路上大量流傳的多數是以DALL-E或是Stable Diffiusion+幾個特定的LoRA所生成的結果。以至於人們越來越有識別真假照片的能力。但或許你不知道的是,早在幾年前純粹用GAN生成技術所產出的人
Thumbnail
Akool 的換臉 FaceSwap 工具,只需要動動手指,就可以在短時間內完成圖像或影片的換臉操作,並生成出高質量的結果。
Thumbnail
本文主要應用deepface的正面(frontal)人臉檢測的預設模型,使用analyze 函數,用於分析一張人臉圖像的情感(emotion)。 在Colab上實現,若用其他平台需稍微修改程式碼。 Deepface Deepface是一個輕量級的Python人臉辨識和臉部屬性分析
Thumbnail
https://huggingface.co/spaces/fffiloni/PASD 這個圖像修復的效果跟變魔術似的。他甚至可以將你奶奶上個世紀的模糊黑白照片,直接修復成眉清目秀的女神。 這個AI圖像修復和增強工具,用到的是最新推出的PASD技術。用起來也超簡單,上傳你要修復的照片,然後填寫正
Thumbnail
現代社會跟以前不同了,人人都有一支手機,只要打開就可以獲得各種資訊。過去想要辦卡或是開戶就要跑一趟銀行,然而如今科技快速發展之下,金融App無聲無息地進到你生活中。但同樣的,每一家銀行都有自己的App時,我們又該如何選擇呢?(本文係由國泰世華銀行邀約) 今天我會用不同角度帶大家看這款國泰世華CUB
Thumbnail
嘿,大家新年快樂~ 新年大家都在做什麼呢? 跨年夜的我趕工製作某個外包設計案,在工作告一段落時趕上倒數。 然後和兩個小孩過了一個忙亂的元旦。在深夜時刻,看到朋友傳來的解籤網站,興致勃勃熬夜體驗了一下,覺得非常好玩,或許有人玩過了,但還是想寫上來分享紀錄一下~
Thumbnail
本文下方連結的文章,利用Stable Diffusion生成512 * 512大小的圖片。 輸入的文字是 dog flying in space,此模型需輸入英文句子才會準確生成。 參考文獻 連結該作者在Hugging Face公開的模型去做使用。 本文是在Colab上執行。
Thumbnail
創建虛擬角色想要賦予生動表情,或是讓歷史人物更變得栩栩如生,利用 AI 模型即可將靜態人物照片變成擁有表情的動態影像。LivePortrait AI 模型可以分析影片中的人物表情,並將其套用至靜態照片,產生具有與影片人物相同表情的動態人像。
Thumbnail
Enhance This HiDiffusion SDXL是一個AI模型,結合HiDiffusion和SDXL兩種圖像生成模型,可以根據既有影像和文字描述生成新的圖像,可用來提高圖像解析度、修復瑕疵、轉換風格和自由創造新的圖像。
Thumbnail
DeepSwapper 是一個免費的線上AI換臉工具,可以輕鬆實現出色的換臉效果,提供DeepSwapper的操作方法和實測範例,實測結果展示了戴眼鏡的照片、各種角度和正面照都能完美呈現。
Thumbnail
隨著人工智能技術的發展,AI 繪圖已經變得常見。Fast Stable Diffusion XL on TPUv5e 是在 Hugging Face 平臺上建立的演示模型,使用 TPU v5e 運行 SDXL 模型,大幅提高了圖像生成速度,生成一張 1024x1024 圖像只需約 10 秒。
Thumbnail
現AI時代我們常見的生成影像是如何製作出來的,或許你已經開始熟悉AI“假臉”的風格。但由于現在網路上大量流傳的多數是以DALL-E或是Stable Diffiusion+幾個特定的LoRA所生成的結果。以至於人們越來越有識別真假照片的能力。但或許你不知道的是,早在幾年前純粹用GAN生成技術所產出的人
Thumbnail
Akool 的換臉 FaceSwap 工具,只需要動動手指,就可以在短時間內完成圖像或影片的換臉操作,並生成出高質量的結果。
Thumbnail
本文主要應用deepface的正面(frontal)人臉檢測的預設模型,使用analyze 函數,用於分析一張人臉圖像的情感(emotion)。 在Colab上實現,若用其他平台需稍微修改程式碼。 Deepface Deepface是一個輕量級的Python人臉辨識和臉部屬性分析
Thumbnail
https://huggingface.co/spaces/fffiloni/PASD 這個圖像修復的效果跟變魔術似的。他甚至可以將你奶奶上個世紀的模糊黑白照片,直接修復成眉清目秀的女神。 這個AI圖像修復和增強工具,用到的是最新推出的PASD技術。用起來也超簡單,上傳你要修復的照片,然後填寫正