Stable Diffusion進階 -- 糊臉清晰化
前言
偶而會碰到一種例子，就是在算圖時發現了一個很不錯的全身人物圖，當我將它放大之後，又想要抓個臉部特寫，卻發現人物的臉已經糊掉了。通常人物臉糊掉時，可以將面部的圖畫單獨剪出來，用幾種方法簡單修復看看：
- 使用Extra的Scale by，將人臉圖繼續放大，看看放大演算法能否修復模糊的線條。
- 使用ControlNet的Tile功能重新產生臉部細節。
- 用inpaint配合ControlNet的openpose以及depth一步一步慢慢修。
我以這張圖為例：
在這種情況下，我試過單純的Upscale，由於線條邊緣太過模糊，單純的AI放大演算法沒有辦法改善這張模糊的臉。
這時候還有兩種方法可以銳利化這張臉：
ControlNet Tile + Inpaint
本節實作細節由
修正細節：Inpaint + Tile Resample - Stable Diffusion
啟發，ControlNet的Tile Resample實在非常強大。
首先，在Inpaint將想要銳利化的地方選起來：
此時的Inpaint設定為
- Masked content: original
- Inpaint area: Only masked
- Denoising strength: 0.3到0.5之間
然後啟動ControlNet，選擇Tile resample，將Control Weight降到0.5，但是Down Sampling Rate開到最大的8（也就是說，演算法會先將圖縮到八倍小，然後開始使用AI放大）。要注意到，這時候不用選圖放入ControlNet。
然後跑起來，有很大的機率會得到很不錯的結果！
ControlNet openpose/depth + Inpaint
當上述方法都沒用時，還有最原始的inpaint加上img2img的手工修臉法。
首先，將這張圖丟進Inpaint頁面下，然後把五官都選起來：
接著在Inpaint設定中，使用：
- Masked content: original
- Inpaint area: Only masked
- Denoising strength: 0.45到0.6之間
在這個高的Denoising strength之下，角色的臉部可能會完全改變，為了不要讓她變臉，必須使用ControlNet的openpose和depth來鎖住角色的五官位置與大致輪廓：
在這邊還不要使用萬能Canny，因為這時角色的面部特徵還太模糊，既使用上Canny也抓不到角色完整的五官線條，反而會導致AI亂畫，弄出歪掉的五官。
接著開始算圖，每完成一張就檢查是否比上一張更接近自己想要的五官，同時不斷變動Inpaint的選取範圍以及Denosing strength。這邊就很像傳統的電繪藝術家，必須靠自己的判斷來決定是否算圖成功，以及下一步要改變哪些部位和力道強弱。
當面部清晰到一個程度之後，我們可以將第一個ControlNet的openpose設定改成canny，以得到更好的五官掌控：
此時可以降低Denoising strength到0.25到0.3之間，縮小inpaint的範圍到五官等需要細緻調整的範圍。
這樣再跑幾回，然後將完成圖拿到img2img再跑個幾次，將整張圖因為inpaint選取範圍變動造成的色差弭平，就能得到完成圖了：
比較一下之前與之後的五官，尤其是眼珠上的反光與上下睫毛，就會發現效果相當明顯。
這是一招非常耗費時間與專注力的方法，是在Upscale與ControlNet Tile都無法修補時的最終手段。
祝大家AI算圖愉快！
進階技巧目錄：
- Stable Diffusion進階 -- 製作角色設定圖
- Stable Diffusion進階 -- 轉換線稿/漫畫稿
- Stable Diffusion進階 -- 常用網站
- Stable Diffusion進階 -- CLIP Skip 2
- Stable Diffusion進階 -- 臉崩修復
- Stable Diffusion進階 -- X/Y/Z plot
- Stable Diffusion進階 -- 提示詞矩陣
- Stable Diffusion進階 -- 練習，歡迎來到我的家鄉
- Stable Diffusion進階 -- 穿衣換衣術
- Stable Diffusion進階 -- 醒來！表情變換
- Stable Diffusion進階 -- 雷光變幻！
- Stable Diffusion進階 -- 糊臉清晰化
- Stable Diffusion進階 -- 練習，這是利息
- Stable Diffusion進階 -- 人工與工人智慧去背
- Stable Diffusion進階 -- 手部修復
- Stable Diffusion進階 -- ControlNet新功能Reference
即將進入廣告，捲動後可繼續閱讀
為什麼會看到廣告
留言0
查看全部
你可能也想看
Google News 追蹤
隨著理財資訊的普及，越來越多台灣人不再將資產侷限於台股，而是將視野拓展到國際市場。特別是美國市場，其豐富的理財選擇，讓不少人開始思考將資金配置於海外市場的可能性。
然而，要參與美國市場並不只是盲目跟隨標的這麼簡單，而是需要策略和方式，尤其對新手而言，除了選股以外還會遇到語言、開戶流程、Ap
嘿，大家新年快樂~ 新年大家都在做什麼呢？
跨年夜的我趕工製作某個外包設計案，在工作告一段落時趕上倒數。
然後和兩個小孩過了一個忙亂的元旦。在深夜時刻，看到朋友傳來的解籤網站，興致勃勃熬夜體驗了一下，覺得非常好玩，或許有人玩過了，但還是想寫上來分享紀錄一下~
Inpaint-web 免費開源的 AI 圖像擦除與放大工具，在用戶端瀏覽器載入模型，處理過程都在本機裝置上執行。完全免費，無須註冊也沒有限制次數，簡單塗抹標記即可擦除該區域的影像，輸出圖片會保留原來尺寸，還可將圖片解析度放大四倍。
Enhance This HiDiffusion SDXL是一個AI模型，結合HiDiffusion和SDXL兩種圖像生成模型，可以根據既有影像和文字描述生成新的圖像，可用來提高圖像解析度、修復瑕疵、轉換風格和自由創造新的圖像。
DeepSwapper 是一個免費的線上AI換臉工具，可以輕鬆實現出色的換臉效果，提供DeepSwapper的操作方法和實測範例，實測結果展示了戴眼鏡的照片、各種角度和正面照都能完美呈現。
隨著人工智能技術的發展，AI 繪圖已經變得常見。Fast Stable Diffusion XL on TPUv5e 是在 Hugging Face 平臺上建立的演示模型，使用 TPU v5e 運行 SDXL 模型，大幅提高了圖像生成速度，生成一張 1024x1024 圖像只需約 10 秒。
直方圖均衡化處理是一種通過調整圖像的直方圖來改變圖像外觀和質量的圖像處理技術。這通常涉及對圖像的亮度、對比度和顏色分佈進行調整
此方法對於背景和前景均亮或均暗的影像很有用。並在曝光過度或曝光不足的照片中獲得更好的細節。
這篇要運用自動遮罩、重繪、批次的技巧，幫同一個人物更換不同背景。
自動遮罩
自動遮罩採用Segment Anything這個節點組，載入圖片後可以依指定的提示詞自動產生遮罩圖像，這邊我要更換的是背景，所以先讓AI抓出人物後，再反轉遮罩範圍輸出，為了讓重繪圖像不要過於生硬，將遮罩進行了高斯模糊。
Tensor Art 使用 Stable Diffusion 的各種模型，也能使用ControlNet 和 LoRA功能，根據使用者的輸入來文生圖、圖生圖，生成各種風格的高質量圖像，包括人像、動人的風景、創意的抽象畫等。
Akool 的換臉 FaceSwap 工具，只需要動動手指，就可以在短時間內完成圖像或影片的換臉操作，並生成出高質量的結果。
本文主要應用deepface的正面（frontal）人臉檢測的預設模型，使用analyze 函數，用於分析一張人臉圖像的情感（emotion）。
在Colab上實現，若用其他平台需稍微修改程式碼。
Deepface
Deepface是一個輕量級的Python人臉辨識和臉部屬性分析
https://huggingface.co/spaces/fffiloni/PASD
這個圖像修復的效果跟變魔術似的。他甚至可以將你奶奶上個世紀的模糊黑白照片,直接修復成眉清目秀的女神。
這個AI圖像修復和增強工具,用到的是最新推出的PASD技術。用起來也超簡單,上傳你要修復的照片,然後填寫正
隨著理財資訊的普及，越來越多台灣人不再將資產侷限於台股，而是將視野拓展到國際市場。特別是美國市場，其豐富的理財選擇，讓不少人開始思考將資金配置於海外市場的可能性。
然而，要參與美國市場並不只是盲目跟隨標的這麼簡單，而是需要策略和方式，尤其對新手而言，除了選股以外還會遇到語言、開戶流程、Ap
嘿，大家新年快樂~ 新年大家都在做什麼呢？
跨年夜的我趕工製作某個外包設計案，在工作告一段落時趕上倒數。
然後和兩個小孩過了一個忙亂的元旦。在深夜時刻，看到朋友傳來的解籤網站，興致勃勃熬夜體驗了一下，覺得非常好玩，或許有人玩過了，但還是想寫上來分享紀錄一下~
Inpaint-web 免費開源的 AI 圖像擦除與放大工具，在用戶端瀏覽器載入模型，處理過程都在本機裝置上執行。完全免費，無須註冊也沒有限制次數，簡單塗抹標記即可擦除該區域的影像，輸出圖片會保留原來尺寸，還可將圖片解析度放大四倍。
Enhance This HiDiffusion SDXL是一個AI模型，結合HiDiffusion和SDXL兩種圖像生成模型，可以根據既有影像和文字描述生成新的圖像，可用來提高圖像解析度、修復瑕疵、轉換風格和自由創造新的圖像。
DeepSwapper 是一個免費的線上AI換臉工具，可以輕鬆實現出色的換臉效果，提供DeepSwapper的操作方法和實測範例，實測結果展示了戴眼鏡的照片、各種角度和正面照都能完美呈現。
隨著人工智能技術的發展，AI 繪圖已經變得常見。Fast Stable Diffusion XL on TPUv5e 是在 Hugging Face 平臺上建立的演示模型，使用 TPU v5e 運行 SDXL 模型，大幅提高了圖像生成速度，生成一張 1024x1024 圖像只需約 10 秒。
直方圖均衡化處理是一種通過調整圖像的直方圖來改變圖像外觀和質量的圖像處理技術。這通常涉及對圖像的亮度、對比度和顏色分佈進行調整
此方法對於背景和前景均亮或均暗的影像很有用。並在曝光過度或曝光不足的照片中獲得更好的細節。
這篇要運用自動遮罩、重繪、批次的技巧，幫同一個人物更換不同背景。
自動遮罩
自動遮罩採用Segment Anything這個節點組，載入圖片後可以依指定的提示詞自動產生遮罩圖像，這邊我要更換的是背景，所以先讓AI抓出人物後，再反轉遮罩範圍輸出，為了讓重繪圖像不要過於生硬，將遮罩進行了高斯模糊。
Tensor Art 使用 Stable Diffusion 的各種模型，也能使用ControlNet 和 LoRA功能，根據使用者的輸入來文生圖、圖生圖，生成各種風格的高質量圖像，包括人像、動人的風景、創意的抽象畫等。
Akool 的換臉 FaceSwap 工具，只需要動動手指，就可以在短時間內完成圖像或影片的換臉操作，並生成出高質量的結果。
本文主要應用deepface的正面（frontal）人臉檢測的預設模型，使用analyze 函數，用於分析一張人臉圖像的情感（emotion）。
在Colab上實現，若用其他平台需稍微修改程式碼。
Deepface
Deepface是一個輕量級的Python人臉辨識和臉部屬性分析
https://huggingface.co/spaces/fffiloni/PASD
這個圖像修復的效果跟變魔術似的。他甚至可以將你奶奶上個世紀的模糊黑白照片,直接修復成眉清目秀的女神。
這個AI圖像修復和增強工具,用到的是最新推出的PASD技術。用起來也超簡單,上傳你要修復的照片,然後填寫正