Stable Diffusion繪圖從零開始 (4) 用Control Net玩紙娃娃換衣

更新於 發佈於 閱讀時間約 4 分鐘
raw-image

▲如圖,這篇文會介紹如何Control Net,在同一張圖內,相同的臉孔和姿勢之下,更換服裝和髮型。使用的AI繪圖網站是TensorArt,屬於一種雲端版Stable Diffusion網站。

什麼是Control Net?

Control Net 是一種能「指定圖像結構」的技術,能讓 AI 根據輪廓、姿勢或深度等條件作畫。它可以在 Stable Diffusion中搭配各種「控制圖」,像是邊緣線圖或人體骨架圖。只要在繪圖界面中載入對應的 ControlNet 模型與控制圖,就能生成與該結構相符的畫面。目前網路上已有多種 ControlNet 模型可用,涵蓋邊緣控制、姿勢控制、深度控制等多種應用。透過 ControlNet,繪圖 AI 不再只憑文字提示畫圖,而能更精準地生成符合需求的作品。

步驟一:準備Control Net用的原版圖

首先我們會需要一個拿來換衣服的基底,這個基底的服裝跟髮型線條越少越好,所以最好的方法就是要出「光頭 (bald)」+「裸體 (nude)」的圖。

但本教學為普遍級,而且天冷不穿衣服會著涼。
作為替代方案,就用史庫水(日式學校泳裝)吧,沒有複雜的線條。
參考提示詞如下:

masterpiece, best quality, good quality, newest, highres, absurdres,
1girl, solo, looking at viewer, cowboy shot,
Bald,competition_school_swimsuit,white swimsuit,hand up,
white background,simple_background,score_9,score_8_up,score_7_up,source_anime,perfect hands
raw-image

如果從來沒有用TensorArt出圖的朋友建議先看一下這篇圖文教學再回來。

參數設定如下

基礎模型:pony
微調模型(Checkpoint):Prefect Pony XL
使用LoRA:無

採樣器:euler
調度器:karras

採樣次數:30
CFG Scale:5
VAE:Automatic(沒設定)

忘了用穩定手的LoRA,所以大概試了7~8張出了一張還行的,如附圖。

接著把這張圖片下載到電腦裡。

步驟二:設定ControlNet

在左邊的控制面板,按下「添加ControlNet」。

raw-image

可以選擇的ControlNet有很多種,每種的效果不太一樣。
我們今天要用的是「Scribble」,可以高度的控制整張圖的構圖和臉孔細節。

raw-image

ControlNet model選擇,「xinsir/controlnet-scribble-sdxl-1.0.safetensors」。
預處理器選擇「scribble_xdog」,接著把剛剛的原版圖上傳後按下「確定」。

raw-image

步驟三:實際出圖

Control Net也可以設定權重,建議調整三個參數。
權重:0.3~0.8(數值越高越會受到本來的泳裝輪廓影響,太低整張圖姿勢會跑掉)
Control Step (開始):0
Control Step (結束):0.3~0.8
這邊的參數每種服裝需要的調整其實不太一樣。
需要反覆多試幾次才能抓到一個比較好的平衡。
實測出一張日式學校體育服的參數設定如下:

raw-image

提示詞如下:

masterpiece, best quality, good quality, newest, highres, absurdres, 
1girl, solo, looking at viewer, cowboy shot,
black hair,long hair,hand up,((buruma)),white shirt,(short sleeves shirt),
white background,simple_background,score_9,score_8_up,score_7_up,source_anime,perfect hands

參數設定通通都跟出原版圖的時候一樣。
跟原圖比對一下

raw-image

因為Scribble是轉成黑白線稿去控制生圖,所以陰影會跟原圖不太一樣。
但不礙事。
多試試各種不同的提示詞和服裝LoRA的組合如下:
(如果想多了解LoRA的可以參考這篇。)

raw-image

▲(運動內衣、小禮服、賽車女郎、盔甲)

如果不是要上面這張圖一樣量產各種不同組合的髮型和服裝的話。
同樣的方法一樣可以用在各種人物圖的換裝。
例如這張獵人的瑪奇(原圖出處

raw-image

也是換得滿好的。

以上是本篇全部的內容。

如果喜歡這類主題的話,可以看其他第1篇~第8篇(一覽)。

也歡迎在Fackbook上追蹤我的頁面

留言
avatar-img
留言分享你的想法!
avatar-img
幻詠 Gen Ai Studio
9會員
105內容數
探索ChatGPT等生成式AI 的各領域應用 1.分享 AI 工具的實測結果&提示詞技巧 2.分享 AI 創作內容
幻詠 Gen Ai Studio的其他內容
2025/04/16
前一篇分享了T恤上衣的提示詞,這次來分享裙子相關的提示詞。 包含怎麼用提示詞調整裙子的長短、樣式、剪裁、花樣等。 使用的基礎模型(Checkpoint)為:Nova Anime XL
Thumbnail
2025/04/16
前一篇分享了T恤上衣的提示詞,這次來分享裙子相關的提示詞。 包含怎麼用提示詞調整裙子的長短、樣式、剪裁、花樣等。 使用的基礎模型(Checkpoint)為:Nova Anime XL
Thumbnail
2025/04/07
女角髮型提示詞的TensorArt(StableDiffusion)教學文,收到了還不錯的回響。Facebook粉絲頁和方格子的流量都很好,我想可能反應了這方面的資源的確是有一定程度的需求。這次來分享T恤上衣相關的提示詞,另外AI科技真的發展得很快速,這篇也會分享融合了ChatGPT-4o的服裝調整
Thumbnail
2025/04/07
女角髮型提示詞的TensorArt(StableDiffusion)教學文,收到了還不錯的回響。Facebook粉絲頁和方格子的流量都很好,我想可能反應了這方面的資源的確是有一定程度的需求。這次來分享T恤上衣相關的提示詞,另外AI科技真的發展得很快速,這篇也會分享融合了ChatGPT-4o的服裝調整
Thumbnail
2025/03/27
基礎模型(ChekPoint)的選擇是在TensorArt上進行AI繪圖的第一步。 但到底要選擇哪一個ChekPoint開始呢? 網站上的模型百百種,但動漫風格來說,現在主流為兩大系統,pony和Illustrious。 熱門的ChekPoint大多來自於這兩款模型的衍伸微調款。
Thumbnail
2025/03/27
基礎模型(ChekPoint)的選擇是在TensorArt上進行AI繪圖的第一步。 但到底要選擇哪一個ChekPoint開始呢? 網站上的模型百百種,但動漫風格來說,現在主流為兩大系統,pony和Illustrious。 熱門的ChekPoint大多來自於這兩款模型的衍伸微調款。
Thumbnail
看更多
你可能也想看
Thumbnail
沙龍一直是創作與交流的重要空間,這次 vocus 全面改版了沙龍介面,就是為了讓好內容被好好看見! 你可以自由編排你的沙龍首頁版位,新版手機介面也讓每位訪客都能更快找到感興趣的內容、成為你的支持者。 改版完成後可以在社群媒體分享新版面,並標記 @vocus.official⁠ ♥️ ⁠
Thumbnail
沙龍一直是創作與交流的重要空間,這次 vocus 全面改版了沙龍介面,就是為了讓好內容被好好看見! 你可以自由編排你的沙龍首頁版位,新版手機介面也讓每位訪客都能更快找到感興趣的內容、成為你的支持者。 改版完成後可以在社群媒體分享新版面,並標記 @vocus.official⁠ ♥️ ⁠
Thumbnail
每年4月、5月都是最多稅要繳的月份,當然大部份的人都是有機會繳到「綜合所得稅」,只是相當相當多人還不知道,原來繳給政府的稅!可以透過一些有活動的銀行信用卡或電子支付來繳,從繳費中賺一點點小確幸!就是賺個1%~2%大家也是很開心的,因為你們把沒回饋變成有回饋,就是用卡的最高境界 所得稅線上申報
Thumbnail
每年4月、5月都是最多稅要繳的月份,當然大部份的人都是有機會繳到「綜合所得稅」,只是相當相當多人還不知道,原來繳給政府的稅!可以透過一些有活動的銀行信用卡或電子支付來繳,從繳費中賺一點點小確幸!就是賺個1%~2%大家也是很開心的,因為你們把沒回饋變成有回饋,就是用卡的最高境界 所得稅線上申報
Thumbnail
最近在嘗試使用不同的AI生圖方式混合出圖的方式,採用A平台的優點,並用B平台後製的手法截長補短,創造出自己更想要的小說場景,效果不錯,現在以這張圖為例,來講一下我的製作步驟。
Thumbnail
最近在嘗試使用不同的AI生圖方式混合出圖的方式,採用A平台的優點,並用B平台後製的手法截長補短,創造出自己更想要的小說場景,效果不錯,現在以這張圖為例,來講一下我的製作步驟。
Thumbnail
本文章介紹了ControlCom影像合成模型的技術與架構,以及其與其他方法的比較。模型具有可控的圖像合成能力,並提供了豐富的細節信息。文章詳細解釋了模型的優勢、方法與架構,以及數據準備和結果與結論。
Thumbnail
本文章介紹了ControlCom影像合成模型的技術與架構,以及其與其他方法的比較。模型具有可控的圖像合成能力,並提供了豐富的細節信息。文章詳細解釋了模型的優勢、方法與架構,以及數據準備和結果與結論。
Thumbnail
最近有空時就在看如何使用AI作圖的方式製作出有魄力的動作與構圖,恰巧在Civitai這個AI作圖網站上找到了一些有趣的人物姿態,因此發想了一些構圖,依照這些構想做出來的圖效果還算可以接受,因此在這邊記錄一下過程與步驟。
Thumbnail
最近有空時就在看如何使用AI作圖的方式製作出有魄力的動作與構圖,恰巧在Civitai這個AI作圖網站上找到了一些有趣的人物姿態,因此發想了一些構圖,依照這些構想做出來的圖效果還算可以接受,因此在這邊記錄一下過程與步驟。
Thumbnail
這篇要搭建一個同時生成寫實照片跟動漫風格圖片的工作流,還可以幫線稿上色。
Thumbnail
這篇要搭建一個同時生成寫實照片跟動漫風格圖片的工作流,還可以幫線稿上色。
Thumbnail
AI生成動漫圖片 爆出資料庫中有真人兒色
Thumbnail
AI生成動漫圖片 爆出資料庫中有真人兒色
Thumbnail
AI生成圖片並非完全可控,所以需要很多額外手段去控制,這篇要來試試幾個方法讓生成的圖片更加可控。
Thumbnail
AI生成圖片並非完全可控,所以需要很多額外手段去控制,這篇要來試試幾個方法讓生成的圖片更加可控。
Thumbnail
Tensor Art 使用 Stable Diffusion 的各種模型,也能使用ControlNet 和 LoRA功能,根據使用者的輸入來文生圖、圖生圖,生成各種風格的高質量圖像,包括人像、動人的風景、創意的抽象畫等。
Thumbnail
Tensor Art 使用 Stable Diffusion 的各種模型,也能使用ControlNet 和 LoRA功能,根據使用者的輸入來文生圖、圖生圖,生成各種風格的高質量圖像,包括人像、動人的風景、創意的抽象畫等。
Thumbnail
雖然有了圖生圖讓我們除了文字描述外,能利用圖片參照的方式對Stable Diffusion生成結果進行引導,但它仍然還有許多不足的地方。有些時後我並不想整張圖都完全參照,只是想提取出參考圖中單一/部分的特定元素(構圖、人物/物體間空間關係、配色、肢體動作、外觀輪廓……等)來對生成的圖像結果進行約束.
Thumbnail
雖然有了圖生圖讓我們除了文字描述外,能利用圖片參照的方式對Stable Diffusion生成結果進行引導,但它仍然還有許多不足的地方。有些時後我並不想整張圖都完全參照,只是想提取出參考圖中單一/部分的特定元素(構圖、人物/物體間空間關係、配色、肢體動作、外觀輪廓……等)來對生成的圖像結果進行約束.
Thumbnail
今天要來看一個ControlNet新出的模型 -- Reference以及它的一些用法。
Thumbnail
今天要來看一個ControlNet新出的模型 -- Reference以及它的一些用法。
Thumbnail
ControlNet這個Stable diffusion外掛非常實用,相關教學可算是滿坑滿谷了,我這篇教學主要是會特別說明整個套件其實有很多功能並不實用,你只需要專注在自己真正需要的功能上就好,而我會列一些我自己的測試結果以證明我為什麼說有些功能並不實用。
Thumbnail
ControlNet這個Stable diffusion外掛非常實用,相關教學可算是滿坑滿谷了,我這篇教學主要是會特別說明整個套件其實有很多功能並不實用,你只需要專注在自己真正需要的功能上就好,而我會列一些我自己的測試結果以證明我為什麼說有些功能並不實用。
追蹤感興趣的內容從 Google News 追蹤更多 vocus 的最新精選內容追蹤 Google News