Stable Diffusion進階 -- OpenPose手部修復

更新於 發佈於 閱讀時間約 2 分鐘

本篇要來解說一個最近新增的ControlNet前置處理器dw_openpose_full,如何使用它來快速修正爛掉的雙手手指。

首先,在介紹這個方法之前,已經有一些現成方法可以修正手指:

Stable Diffusion進階 -- 手部修復

Stable Diffusion進階 -- Loopback手部修復

這些方法的基礎都是使用實際的參考物,例如人偶網站的手,或者手指姿勢網站的手姿勢圖片來覆蓋掉原本的手,然後慢慢修正成想要的形狀。

ControlNet的dw_openpose_full

而在不久之前,ControlNet將一個非常強大的前置處理器dw_openpose_full加入了openpose家族,只要是ControlNet 1.1.400之後的版本都有納入這個前置處理器。這個前置處理器厲害的地方,就是他的預測非常準確,很多時候其他前置處理器會跑出亂七八糟姿勢圖的地方,它依然能正確解析,即使不對也八九不離十,只要透過openpose editor之類的外掛稍微處理,就能修改成自己需要的姿勢:

使用openpose editor,就能快速修正人物骨架

使用openpose editor,就能快速修正人物骨架

這個時候,配合inpaint與使用夠高的Denoising Strength,就有機會快速修正爛掉的手指。

修正範例

這裡有一張我產生的1152X768的半身圖,人物表情與姿勢都很好,問題是手指整個爛成一團麻花:

亂七八糟的手指啊!

亂七八糟的手指啊!

這時候我們將整張圖與提示詞傳送到inpaint裡面,將手部整個圈選起來,然後在inpaint設定裡使用0.8的高強度Denosing Strength,讓Stable Diffusion有足夠的雜訊來重繪。

0.8的高強度Denoising Strength

0.8的高強度Denoising Strength

之後,打開ControlNet的設定,選擇Openpose,並選擇dw_openpose_full這個前置處理器,然後就能試著區域重繪了!

ControlNet的設定

ControlNet的設定

dw_openpose_full對於手指偵測非常在行,爛掉的手一樣可以大致偵測出可能的位置,如果不滿意,就可以使用openpose editor微調一下。

試著重複跑幾張,應該很容易出現可接受的修正圖:

手指差不多都正確修正了

手指差不多都正確修正了

通常修正完的手指還會有些小缺陷,需要用到繪圖軟體的塗抹工具來做粗修正,然後再丟回Stable Diffusion做小打磨,就能得到很不錯的正確手指了!

通常使用這個方法時,手的部位必須夠大,最好超過150X150,效果才會明顯,否則還是使用以前提過的方法成功率較大。

祝大家AI算圖愉快!

avatar-img
22.4K會員
413內容數
寫奇幻小說,畫圖,心得,各式各樣作品的故鄉。
留言0
查看全部
avatar-img
發表第一個留言支持創作者!
這篇文章想要聊一下,在使用ControlNet的reference_only時,因為原始參考圖實在太過於模糊,造成生產出來的圖片品質不佳的情況下要怎麼使用一些技巧提高參考圖的精細度。
這篇文章要來分享的是,怎麼把一張糊掉的圖精細化。 這個問題最主要的對象是已經有明顯的提示詞,並且以ControlNet的refernece_only來生產的圖。
今天要分享的是一個在重度使用inpaint跟loopback常遇到的問題,就是水漬清除。
最近,光頭佬Olivio Sarikas分享了一個使用ControlNet非官方模型來控制txt2img的光影佈局的方法。
在上一篇文章中,我使用人偶圖產出了一個姿勢正確,但是手指錯亂且臉型崩潰的半成品圖,這一篇我要繼續修正這些問題,得到一個草稿圖,再使用這個草稿製作大張的完成圖。
前言 本篇要介紹一個流程,讓我們可以使用人偶姿勢生成網站或App來製作特意的姿勢與角度,並且經過一套流程之後,轉化成我們要的人物。 在使用Stable Diffusion生成圖片時,最常遇見的問題是人物的動作或位置不照我們的心意生成,尤其是一些高動態或不常見的姿勢與角度,或者手持物品,在某些模型上是
這篇文章想要聊一下,在使用ControlNet的reference_only時,因為原始參考圖實在太過於模糊,造成生產出來的圖片品質不佳的情況下要怎麼使用一些技巧提高參考圖的精細度。
這篇文章要來分享的是,怎麼把一張糊掉的圖精細化。 這個問題最主要的對象是已經有明顯的提示詞,並且以ControlNet的refernece_only來生產的圖。
今天要分享的是一個在重度使用inpaint跟loopback常遇到的問題,就是水漬清除。
最近,光頭佬Olivio Sarikas分享了一個使用ControlNet非官方模型來控制txt2img的光影佈局的方法。
在上一篇文章中,我使用人偶圖產出了一個姿勢正確,但是手指錯亂且臉型崩潰的半成品圖,這一篇我要繼續修正這些問題,得到一個草稿圖,再使用這個草稿製作大張的完成圖。
前言 本篇要介紹一個流程,讓我們可以使用人偶姿勢生成網站或App來製作特意的姿勢與角度,並且經過一套流程之後,轉化成我們要的人物。 在使用Stable Diffusion生成圖片時,最常遇見的問題是人物的動作或位置不照我們的心意生成,尤其是一些高動態或不常見的姿勢與角度,或者手持物品,在某些模型上是
你可能也想看
Google News 追蹤
Thumbnail
現代社會跟以前不同了,人人都有一支手機,只要打開就可以獲得各種資訊。過去想要辦卡或是開戶就要跑一趟銀行,然而如今科技快速發展之下,金融App無聲無息地進到你生活中。但同樣的,每一家銀行都有自己的App時,我們又該如何選擇呢?(本文係由國泰世華銀行邀約) 今天我會用不同角度帶大家看這款國泰世華CUB
Thumbnail
嘿,大家新年快樂~ 新年大家都在做什麼呢? 跨年夜的我趕工製作某個外包設計案,在工作告一段落時趕上倒數。 然後和兩個小孩過了一個忙亂的元旦。在深夜時刻,看到朋友傳來的解籤網站,興致勃勃熬夜體驗了一下,覺得非常好玩,或許有人玩過了,但還是想寫上來分享紀錄一下~
Thumbnail
我已往產生圖片都會盡量避開手部(手指)的動作,這次,真的認真來刻意畫手。 (其實,我覺得 Bing 和 ChatGPT 的 DALL·E 3 模型畫手也勉強可以,但我絕對不會特別想去強調 "手" 的動作,來產生圖片。)
Thumbnail
沒事就肆無忌憚地橫生的裂痕 搞得十隻手指喪失了正常伸展的靈活
Thumbnail
我有個朋友的身體,之前有個很有趣的小問題。 就是無名指伸直時,中指屈曲的力量會大幅下滑。 然後我就試著改善看看,以下是我的實驗過程跟結果,幸運的是成功了☆ 當時我是這樣假設的: 我推測有屈肌同時控制無名指跟中指,或是有神經同時支配無名指跟中指的屈肌,或是兩者都有,以上圖解是畫前者,以下推
Thumbnail
老實說,我看許多 IG(真人的啦!)妹妹,自拍的超讚的~ 那麼~ AI 也可以產生那種感覺嗎? 叫 AI 產生自拍感的照片~試了一下,還行,但我著個懶人,想要快速產生想要的姿勢...還是用 OpenPose 吧! 今天請了精靈小姊姊來當模特兒! 沒玩過手機的她,玩得可樂了。
Thumbnail
可能包含敏感內容
今天,繼續用 Openpose 玩一些姿勢,還蠻有趣的,繼續進行分享~ Openpose 的控制線圖,有需要的朋友,自行運用喔。點選連結,可以直接在 Tensor Art 上看到所使用的模型與提示詞...
Thumbnail
本文來分享一些 Openpose 的控制線圖,有需要的朋友,自行運用喔。點選連結,可以直接在 Tensor Art 上看到所使用的模型與提示詞。
Thumbnail
Tensor Art 使用 Stable Diffusion 的各種模型,也能使用ControlNet 和 LoRA功能,根據使用者的輸入來文生圖、圖生圖,生成各種風格的高質量圖像,包括人像、動人的風景、創意的抽象畫等。
Thumbnail
可能包含敏感內容
(OpenPose 分不太清楚手是向前伸,還是打開手) 不好意思喔! 我已經挑了最保守的一張當封面了! 其他的...嗯嗯! 我用的控制圖 (512x768) 如下(請自取)
Thumbnail
可能包含敏感內容
一個雙手撫弄頭髮的女生... Tensor.Art 連結在此,登入後可以使用 做同款(Remix) 功能產生類似圖片喔(AI 生圖)。 好的,廢話不多說,直接提供 ControlNet 的 Openpose 圖片~
Thumbnail
https://huggingface.co/spaces/fffiloni/PASD 這個圖像修復的效果跟變魔術似的。他甚至可以將你奶奶上個世紀的模糊黑白照片,直接修復成眉清目秀的女神。 這個AI圖像修復和增強工具,用到的是最新推出的PASD技術。用起來也超簡單,上傳你要修復的照片,然後填寫正
Thumbnail
現代社會跟以前不同了,人人都有一支手機,只要打開就可以獲得各種資訊。過去想要辦卡或是開戶就要跑一趟銀行,然而如今科技快速發展之下,金融App無聲無息地進到你生活中。但同樣的,每一家銀行都有自己的App時,我們又該如何選擇呢?(本文係由國泰世華銀行邀約) 今天我會用不同角度帶大家看這款國泰世華CUB
Thumbnail
嘿,大家新年快樂~ 新年大家都在做什麼呢? 跨年夜的我趕工製作某個外包設計案,在工作告一段落時趕上倒數。 然後和兩個小孩過了一個忙亂的元旦。在深夜時刻,看到朋友傳來的解籤網站,興致勃勃熬夜體驗了一下,覺得非常好玩,或許有人玩過了,但還是想寫上來分享紀錄一下~
Thumbnail
我已往產生圖片都會盡量避開手部(手指)的動作,這次,真的認真來刻意畫手。 (其實,我覺得 Bing 和 ChatGPT 的 DALL·E 3 模型畫手也勉強可以,但我絕對不會特別想去強調 "手" 的動作,來產生圖片。)
Thumbnail
沒事就肆無忌憚地橫生的裂痕 搞得十隻手指喪失了正常伸展的靈活
Thumbnail
我有個朋友的身體,之前有個很有趣的小問題。 就是無名指伸直時,中指屈曲的力量會大幅下滑。 然後我就試著改善看看,以下是我的實驗過程跟結果,幸運的是成功了☆ 當時我是這樣假設的: 我推測有屈肌同時控制無名指跟中指,或是有神經同時支配無名指跟中指的屈肌,或是兩者都有,以上圖解是畫前者,以下推
Thumbnail
老實說,我看許多 IG(真人的啦!)妹妹,自拍的超讚的~ 那麼~ AI 也可以產生那種感覺嗎? 叫 AI 產生自拍感的照片~試了一下,還行,但我著個懶人,想要快速產生想要的姿勢...還是用 OpenPose 吧! 今天請了精靈小姊姊來當模特兒! 沒玩過手機的她,玩得可樂了。
Thumbnail
可能包含敏感內容
今天,繼續用 Openpose 玩一些姿勢,還蠻有趣的,繼續進行分享~ Openpose 的控制線圖,有需要的朋友,自行運用喔。點選連結,可以直接在 Tensor Art 上看到所使用的模型與提示詞...
Thumbnail
本文來分享一些 Openpose 的控制線圖,有需要的朋友,自行運用喔。點選連結,可以直接在 Tensor Art 上看到所使用的模型與提示詞。
Thumbnail
Tensor Art 使用 Stable Diffusion 的各種模型,也能使用ControlNet 和 LoRA功能,根據使用者的輸入來文生圖、圖生圖,生成各種風格的高質量圖像,包括人像、動人的風景、創意的抽象畫等。
Thumbnail
可能包含敏感內容
(OpenPose 分不太清楚手是向前伸,還是打開手) 不好意思喔! 我已經挑了最保守的一張當封面了! 其他的...嗯嗯! 我用的控制圖 (512x768) 如下(請自取)
Thumbnail
可能包含敏感內容
一個雙手撫弄頭髮的女生... Tensor.Art 連結在此,登入後可以使用 做同款(Remix) 功能產生類似圖片喔(AI 生圖)。 好的,廢話不多說,直接提供 ControlNet 的 Openpose 圖片~
Thumbnail
https://huggingface.co/spaces/fffiloni/PASD 這個圖像修復的效果跟變魔術似的。他甚至可以將你奶奶上個世紀的模糊黑白照片,直接修復成眉清目秀的女神。 這個AI圖像修復和增強工具,用到的是最新推出的PASD技術。用起來也超簡單,上傳你要修復的照片,然後填寫正