用1張黑白照片練出你的LoRA

(♥ :為杰克艾粒的影片或文章連結 / ▼ :下載或載點提供 / ✿ :推薦或重點提示)

大家好，我們是杰克艾粒，事發源由你們應該都在Youtube看過了，那我們直接開始吧▼▼▼
♥♥相信來到這裡的人們都是有使用並安裝過stable diffusion的!!♥♥
還沒裝的話有兩個選擇(杰克艾粒YT安裝教學連結)
猴子都會的簡易安裝包

挑戰能力的標準安裝

GOGO!!!

每張照片的狀況不同處理方式不一樣，
我們以這張照片為範例跟大家分享一下製作方法

歌手 純純 活躍於1930年代

首先打開webui，上方列表選擇附加功能，
使用✿✿BSRGAN和GFPGAN✿✿(本次數值如下)，codeformer會變現代網紅(GFPGAN和codformer為webui內建功能)
▼BSRGAN下載網址▼
(下載BSRGAN.pth，模型存放路徑 : SD資料夾 > models > ESRGAN)

本次使用參數

在不希望臉部細節改變的情況下，這個做法非常方便且優秀

BSRGAN(降噪)GFPGAN(臉部修復)

接下來在Huggingface上，下載我們訓練的WBfix controlnet
▼JackEllie的WBfix controlnet▼

▼WBfix yaml▼

再加一個lineart realistic樣貌會更準確

▼lineart controlnet 模型▼

(模型存放路徑 : SD資料夾\models\ControlNet)

♥♥ControlNET基礎介紹♥♥

使用方法很簡單，在文生圖視窗操作
需放上對應的提示詞
範例:
正向 : (masterpiece), (best quality), (realistic:1.5),(colorful photograph),(Headshot of an Asian woman),black hair

反向 : 3d, cartoon, anime, sketches, (worst quality:2), (low quality:2),(make up:1.35),(Fake eyelashes:1.3)

參數設置沒甚麼特殊要求，這次用Euler a / step: 20/CFG: 7 / 種子: -1

模型推薦使用 :✿✿Beautiful Realistic Asians 6.0✿✿

▼▼ 點這裡連結到CivitAI下載▼▼

WBfix參數範例

lineart參數範例

畫個三張選一張喜歡的吧!!

按照上面敘述製作的三張圖片

大家可以把圖片放大看看，這時候的膚感還沒有很優秀

所以我們來使用VQFR吧!

♥♥VQFR猴子安裝包+介面化+使用說明♥♥

使用完VQFR後的結果是這樣，可以對比一下

文生圖(左) VQFR(右)

若是要訓練真人的LoRA，真心推薦使用VQFR先處理過 (╥ω╥)

接下來就簡單啦!!

▼▼ContrilNet 局部重繪▼▼

▼▼ControlNet openpose▼▼

▼▼ControlNet Tile▼▼

(模型存放路徑 : SD資料夾\models\ControlNet)

把VQFR處理好的圖片放進圖生圖頁面

✿✿ControlNET 局部重繪&openpose&Tile混合使用✿✿

(沒有思路的話就上discord跟大家討論吧)

提詞就按照​的部位填寫

範例 :

正向 :(Delicate red cheongsam:1.35),(realistic)

反向 :3d, cartoon, anime, sketches, (worst quality:2), (low quality:2)

如果預處理的pose不理想可以使用

▼▼openpose editor▼▼

webui擴充功能>從網址安裝
https://github.com/huchenlei/sd-webui-openpose-editor.git

webui從網址安裝頁面

安裝好後使用方法如下 :

放入圖片>選擇預處理器>開啟預覽畫面>預覽預處理>如需修改openpode則點選Edit

Edit內介面，直接用滑鼠拖動右側openpose關節，調整好後選擇左上角的發送姿勢到controlnet

完成

✿✿簡單又方便，openpose editor推推✿✿

大致流程 :

1、用局部重繪把黑色先填滿

2、使用局部重繪+openpose換身體

3、局部重繪+tile resample換背景

4、局部重繪+tile resample換頭髮

大致流程範例

你們以為到這裡就結束了嗎?

------------------------------------------------------------------------------還沒!!

笑死

接下來要使用 "VQFR"
先看一下效果吧

(掃描QRcode加入杰克艾粒discord社群吧!!)

VQFR使用前 VQFR使用後

♥♥VQFR猴子安裝+介面化&使用方法♥♥

------------------------------------------------------------------------------

修復前後的對比圖

當然還可以修得更好，但是做為訓練素材，臉部的完整度才是重點，所以我們修到這就好，不然如果一套素材30張，修完會看到阿祖在跟你揮手

好了，接下來是如果你的素材就只有那麼一張該怎麼辦

以下的圖我們就不細修了，告訴大家做法就好，自己慢慢修吧

呆

~~Photoshop 生素材大法~~

這個做法有點麻煩而且效果不是那麼好，但在素材有限的情況下，暫時還沒有更優秀的方式，

不過再怎麼麼說，也比同一張圖只換衣服跟背景來的強

因為是photoshop又是中文介面，我們就輕鬆介紹啦!!

1、打開photoshop，放入圖片

濾鏡 > Neural Fliters

選擇智慧型肖像

可調整選項

我們可以得到這些結果

調整表情、方向和光源

✿✿如果你的LoRA訓練得夠成功，可以使用ControlNet做出更多的動作✿✿

photoshop的頭部控制就差不多是這樣子，

拿這些圖片，去webui使用上面那一套，畫出各種不同的背景髮型，半身照全身照，訓練你的LoRA吧!!

♥♥Kohya標準安裝♥♥

♥♥Kohya基本操作♥♥ (舊安裝不要用了，我們從4分37秒開始看基本操作就好)

這邊再提供一個目前不太推薦但有人在使用的方式
♥♥StableSR 安裝與使用♥♥

好啦!!
這次就先介紹到這邊，

♥♥這次的內容包含了我們自己的ControlNet和VQFR簡易安裝及介面分享♥♥

♥♥記得點讚訂閱喔!!♥♥

♥♥斗內連結 : Buy me a coffee 方格子

Discord : https://discord.gg/TM5d89YNwA

杰克艾粒Discord 杰克艾粒youtube