vocus logo

方格子 vocus

Stable Diffusion進階 -- 臉崩修復

更新 發佈閱讀 5 分鐘

正文

通常我們在Stable Diffusion用特化的模組輸出人物正面肖像圖時,會得到很好的結果,例如一個典型的512X512圖片,只要正面提示詞用得夠多,就能產生出不錯的正面大臉:

raw-image

但如果我們想要用這些模組來輸出人物的全身像,人物的臉過小,在畫面上會呈現崩潰的型態,例如下面這張,我用了一模一樣的面部提示詞,但讓人物騎在馬上,畫面就變成了:

raw-image

很明顯,整張畫面馬匹沒問題,衣服沒問題,光影沒問題,但是臉怎麼像是被流星鎚打過一樣呢?

這其實是因為,人腦是一個高超的面部判別器,可以在0.1秒之內辨別這張臉的瑕疵與不對稱。但是生成AI在訓練時並沒有針對遠方的臉做太多對抗訓練,對AI來說,臉上五官偏移一兩個像素一樣可以通過判別器的檢驗,但是這並逃不過人眼的美感鑑別。

那麼我們要怎麼修補這些崩掉的人臉呢?

解法

最簡單的方法就是將那些臉崩的圖片拉進Automatic1111的Extras標籤,裡面有個智慧放大功能,只要選擇適當的放大模組,就能自動修臉,而且也不用放太大,只要兩倍就效果卓越:

raw-image

各種放大模組都有自己的強項,而我個人最喜歡的是很著名的4x-UltraSharp這個模組,可以在這個網址下載:

https://mega.nz/folder/qZRBmaIY#nIG8KyWFcGNTuMX_XNbJ_g

下載之後放進models/ESRGAN/目錄底下,再重新啟動Automatic1111就能選擇了。

之前臉崩的圖片智慧放大之後,效果就好了不少:

raw-image

但是這樣的放大,其實並沒有照著你的提示詞來修改,而是靠模組自己的特性發揮,所以進化的美顏不一定符合你的想法,在這種時候,就要請出Inpaint來精細發揮了!

將圖傳進Inpaint標籤中,將你指定的正反面提示詞都打上去,用圈選工具將整張臉都選起來,在選單裡面選擇Inpaint Area: Only Masked,將Denoising strength調整在0.4以下,按下Generate來生成。

由於Inpaint Area被限制在Only Masked,Stable Diffusion會將面部先特意放大,再開始依照你的提示詞重繪。由於此時面部被放大到跟肖像畫一樣的程度,所以可以用最精細的方法繪畫,畫完之後再縮小鑲嵌回原畫中,就能做到非常高畫質的面部細節:

raw-image

在這樣的修正下,不只是眼睛顏色重新還原到我指定的顏色,光影也更加仔細,面部線條更柔和,連斗篷上的打結也完美呈現出來。

本方法修正面部的效果卓越,但是用在其他肢體,例如手指或腳趾就完全不行,通常越修越糟糕,還不如自己拿起Photoshop或GIMP修圖來得快。

祝大家算圖快樂!

參照



進階技巧目錄:

  • Stable Diffusion進階 -- 製作角色設定圖
  • Stable Diffusion進階 -- 轉換線稿/漫畫稿
  • Stable Diffusion進階 -- 常用網站
  • Stable Diffusion進階 -- CLIP Skip 2
  • Stable Diffusion進階 -- 臉崩修復
  • Stable Diffusion進階 -- X/Y/Z plot
  • Stable Diffusion進階 -- 提示詞矩陣
  • Stable Diffusion進階 -- 練習,歡迎來到我的家鄉
  • Stable Diffusion進階 -- 穿衣換衣術
  • Stable Diffusion進階 -- 醒來!表情變換
  • Stable Diffusion進階 -- 雷光變幻!
  • Stable Diffusion進階 -- 糊臉清晰化
  • Stable Diffusion進階 -- 練習,這是利息
  • Stable Diffusion進階 -- 人工與工人智慧去背
  • Stable Diffusion進階 -- 手部修復
  • Stable Diffusion進階 -- ControlNet新功能Reference
留言
avatar-img
子不語怪・力・亂・神
37.1K會員
453內容數
寫奇幻小說,畫圖,心得,各式各樣作品的故鄉。
2024/04/11
今天要聊聊一個我最近AI作圖時常用的手法,就是使用真實世界的照片拼接縫合進AI生產的圖片後,補完AI作圖常出現的缺陷(歪曲的武器、錯誤的肢體姿勢、手指錯誤)。 使用這個方法,可以讓AI更貼近我所需要的完成圖,且少了很多用繪圖軟體修修補補的時間。
Thumbnail
2024/04/11
今天要聊聊一個我最近AI作圖時常用的手法,就是使用真實世界的照片拼接縫合進AI生產的圖片後,補完AI作圖常出現的缺陷(歪曲的武器、錯誤的肢體姿勢、手指錯誤)。 使用這個方法,可以讓AI更貼近我所需要的完成圖,且少了很多用繪圖軟體修修補補的時間。
Thumbnail
2023/10/15
最近這幾天都在玩Stable Diffusion近期最火紅的外掛 -- AnimatedDiff。最近加上了prompt travel這個功能,加上新的v2模型讓整體畫面變得很穩定,所以一玩下去驚為天人,決定好好研究這個東西怎麼運作。
Thumbnail
2023/10/15
最近這幾天都在玩Stable Diffusion近期最火紅的外掛 -- AnimatedDiff。最近加上了prompt travel這個功能,加上新的v2模型讓整體畫面變得很穩定,所以一玩下去驚為天人,決定好好研究這個東西怎麼運作。
Thumbnail
2023/10/05
本篇要來解說一個最近新增的ControlNet前置處理器dw_openpose_full,如何使用它來快速修正爛掉的雙手手指。 這些方法的基礎都是使用實際的參考物,例如人偶網站的手,或者手指姿勢網站的手姿勢圖片來覆蓋掉原本的手,
Thumbnail
2023/10/05
本篇要來解說一個最近新增的ControlNet前置處理器dw_openpose_full,如何使用它來快速修正爛掉的雙手手指。 這些方法的基礎都是使用實際的參考物,例如人偶網站的手,或者手指姿勢網站的手姿勢圖片來覆蓋掉原本的手,
Thumbnail
看更多
你可能也想看
Thumbnail
賽勒布倫尼科夫以流亡處境回望蘇聯電影導演帕拉贊諾夫的舞台作品,以十段寓言式殘篇,重新拼貼記憶、暴力與美學,並將審查、政治犯、戰爭陰影與「形式即政治」的劇場傳統推到台前。本文聚焦於《傳奇:帕拉贊諾夫的十段殘篇》的舞台美術、音樂與多重扮演策略,嘗試解析極權底下不可言說之事,將如何成為可被觀看的公共發聲。
Thumbnail
賽勒布倫尼科夫以流亡處境回望蘇聯電影導演帕拉贊諾夫的舞台作品,以十段寓言式殘篇,重新拼貼記憶、暴力與美學,並將審查、政治犯、戰爭陰影與「形式即政治」的劇場傳統推到台前。本文聚焦於《傳奇:帕拉贊諾夫的十段殘篇》的舞台美術、音樂與多重扮演策略,嘗試解析極權底下不可言說之事,將如何成為可被觀看的公共發聲。
Thumbnail
柏林劇團在 2026 北藝嚴選,再次帶來由布萊希特改編的經典劇目《三便士歌劇》(The Threepenny Opera),導演巴里・柯斯基以舞台結構與舞台調度,重新向「疏離」進行提問。本文將從觀眾慾望作為戲劇內核,藉由沉浸與疏離的辯證,解析此作如何再次照見觀眾自身的位置。
Thumbnail
柏林劇團在 2026 北藝嚴選,再次帶來由布萊希特改編的經典劇目《三便士歌劇》(The Threepenny Opera),導演巴里・柯斯基以舞台結構與舞台調度,重新向「疏離」進行提問。本文將從觀眾慾望作為戲劇內核,藉由沉浸與疏離的辯證,解析此作如何再次照見觀眾自身的位置。
Thumbnail
本文深入解析臺灣劇團「晃晃跨幅町」對易卜生經典劇作《海妲.蓋柏樂》的詮釋,從劇本歷史、聲響與舞臺設計,到演員的主體創作方法,探討此版本如何讓經典劇作在當代劇場語境下煥發新生,滿足現代觀眾的觀看慾望。
Thumbnail
本文深入解析臺灣劇團「晃晃跨幅町」對易卜生經典劇作《海妲.蓋柏樂》的詮釋,從劇本歷史、聲響與舞臺設計,到演員的主體創作方法,探討此版本如何讓經典劇作在當代劇場語境下煥發新生,滿足現代觀眾的觀看慾望。
Thumbnail
《轉轉生》為奈及利亞編舞家庫德斯.奧尼奎庫與 Q 舞團創作的當代舞蹈作品,融合舞蹈、音樂、時尚和視覺藝術,透過身體、服裝與群舞結構,回應殖民歷史、城市經驗與祖靈記憶的交錯。本文將從服裝設計、身體語彙與「輪迴」的「誕生—死亡—重生」結構出發,分析《轉轉生》如何以當代目光,形塑去殖民視角的奈及利亞歷史。
Thumbnail
《轉轉生》為奈及利亞編舞家庫德斯.奧尼奎庫與 Q 舞團創作的當代舞蹈作品,融合舞蹈、音樂、時尚和視覺藝術,透過身體、服裝與群舞結構,回應殖民歷史、城市經驗與祖靈記憶的交錯。本文將從服裝設計、身體語彙與「輪迴」的「誕生—死亡—重生」結構出發,分析《轉轉生》如何以當代目光,形塑去殖民視角的奈及利亞歷史。
Thumbnail
本篇要來講述一個使用頻率不輸給文生圖的功能:圖片智慧放大(Upscale)。 這個功能詭異的地方是,他其實是放在Extras這個頁籤裡面。
Thumbnail
本篇要來講述一個使用頻率不輸給文生圖的功能:圖片智慧放大(Upscale)。 這個功能詭異的地方是,他其實是放在Extras這個頁籤裡面。
Thumbnail
這一篇要來敘述Stable Diffusion的Automatic1111的圖生圖(img2img,簡稱i2i)功能。
Thumbnail
這一篇要來敘述Stable Diffusion的Automatic1111的圖生圖(img2img,簡稱i2i)功能。
Thumbnail
這篇要來詳細解說在文生圖(txt2img)裡面,Hires. fix這個東西到底是用來做什麼,以及他的詳細參數。
Thumbnail
這篇要來詳細解說在文生圖(txt2img)裡面,Hires. fix這個東西到底是用來做什麼,以及他的詳細參數。
Thumbnail
Stable Diffusion 算圖時,有時算出來的人臉都像是被揍過一樣!這其實是解析度過小的問題,我們可以透過 img2img upscale 加 inpaint 的手法來解決,只需要兩階段,一起來看看怎麼做吧!
Thumbnail
Stable Diffusion 算圖時,有時算出來的人臉都像是被揍過一樣!這其實是解析度過小的問題,我們可以透過 img2img upscale 加 inpaint 的手法來解決,只需要兩階段,一起來看看怎麼做吧!
Thumbnail
這次要介紹的是stable diffusion webui下的一個小型外掛face editor,可以自動把醜臉歪臉修正回來,不論是大臉小臉都適用,使用方面,原則上全照預設值就行,簡單易用。
Thumbnail
這次要介紹的是stable diffusion webui下的一個小型外掛face editor,可以自動把醜臉歪臉修正回來,不論是大臉小臉都適用,使用方面,原則上全照預設值就行,簡單易用。
Thumbnail
偶而會碰到一種例子,就是在算圖時發現了一個很不錯的全身人物圖,當我將它放大之後,又想要抓個臉部特寫,卻發現人物的臉已經糊掉了。這時我們有個終極方法可以將它清晰化。
Thumbnail
偶而會碰到一種例子,就是在算圖時發現了一個很不錯的全身人物圖,當我將它放大之後,又想要抓個臉部特寫,卻發現人物的臉已經糊掉了。這時我們有個終極方法可以將它清晰化。
Thumbnail
  Stable Diffusion進入Image2Image的放大階段後,很少有算出來的成果是完全滿意的......
Thumbnail
  Stable Diffusion進入Image2Image的放大階段後,很少有算出來的成果是完全滿意的......
Thumbnail
當我們算圖時,有一種特殊情況是,我們對於整張圖的結果都很滿意,但是想要調整人物的表情。我們可以這樣做......
Thumbnail
當我們算圖時,有一種特殊情況是,我們對於整張圖的結果都很滿意,但是想要調整人物的表情。我們可以這樣做......
追蹤感興趣的內容從 Google News 追蹤更多 vocus 的最新精選內容追蹤 Google News