AI繪圖-用Lora打造你的夢幻模特兒吧!三集之二：訓練Lora模型
更新於 發佈於 閱讀時間約 9 分鐘
這邊繼續上一集的內容，進入這一章節時，你應該是已經安裝好stable diffusion webui跟Kohya's GUI了。
這一章就真的要開始準備訓練Lora模型了，步驟有點雜，我拆成四個小步驟來看，這一章節也是最重要的，以後忘了步驟時，也只要回頭來看這一篇就行了。
熟悉這個操作過程以後你就會發現其實並不是真的那麼難，只是小步驟多令人忘而怯步。熟練以後這些操作也只是幾分鐘的事而已，現在只是因為我拆成逐步教學所以才會看起來很多很雜。
第一步：前置作業-準備圖片
接著要做的事情是準備你想畫的人物圖或物品圖，動漫或寫實都行，不限於人物，只要是明確的單一物品都可以，這些素材將成為訓練圖片，
以人物為例，假設你要畫的是林志玲(抱歉我是叔叔了，我只認識林志玲)，你就要準備十幾張林志玲的圖片，最好是以各種角度各種表情的臉部圖片為主，人物長相要清晰清楚，也不要混到其它人的臉。大約十幾張到二十幾張就很充足了，越多不會越好，而太少也不行。
圖片準備好後要將圖片轉為512*512的尺吋，這邊方法很多我就不展開細講了，因為每個人的狀況和習慣都不同，看你要抓大圖縮成小圖，或是抓小圖放大成大圖，或是用圖片編輯軟體用剪的都可以，最重要的是確保不要在轉換過程中造成圖片的失真模糊或扭曲變形。手邊沒工具的話，stable diffusion webui也有內建一些簡單的放大縮小功能。
如果真的對圖片編輯毫無概念毫無方向的話，我講一下我用的軟體名稱是FastStone Image Viewer，它可以提供最基本的裁剪與放大縮小功能。而BIRME也是很方便的免費圖片批次處理網站。
第二步：圖片預處理：
這邊先啟動stable diffusion webui並打開網頁介面，切換到Train功能頁籤，接著選擇下層的Preprocess images頁籤。(注意這邊要啟動的是stable diffusion webui，不是Kohya’s GUI，Kohya’s GUI還沒有要上場。)
這個頁籤有兩個欄位要填寫，Source directory設定你放訓練圖的資料夾位址，而Destination directory設定預處理後的圖片儲存的新資料夾位址。
接著再往下看，建議勾選Create flipped copies，這會把你的圖片反轉一次，讓你一張圖變兩張圖，使你的訓練圖數量直接加倍。
而Use BLIP for caption與Use deepbooru for caption這兩個選擇則是二選一，你的訓練圖是寫實風格就勾選Use BLIP for caption，如果是動漫類或二次元風格就勾選Use deepbooru for caption。
其它設定都不用動，確認好後就按下右下角的Preprocess按鈕。
查看stable diffusion webui的終端視窗可知執行進度，這邊不會跑太久，執行完成後的畫面大約像下圖這樣：
預處理完成後的檔案會儲存在上一步設定的Destination directory資料夾內，檔案結構會類似下圖這種，一張圖跟著一個文字檔：
將這些檔案全部集中到一個訓練圖資料夾中，例如下圖我是把檔案全部放到G:\Asuka訓練圖集\這個資料夾下，資料夾名稱可以自取，不一定要叫做XXX訓練圖集：
接著在裡面再建一個子資料夾，名稱取為「每張圖訓練步數_角色名稱」，例如我希望每個圖片的訓練步數是100步，而角色名稱是Asuka，就將這個子資料夾名稱取為「100_Asuka」。
接著將這些訓練圖與文字檔全丟到這個子資料夾裡面去：
這邊要注意的是，子資料夾名稱的結構是「每張圖訓練步數_角色名稱」，其中的角色名稱不重要，隨便取自己能辨識的即可，每張圖訓練步數才是重點。
Lora的訓練步數最低不可低於1500步，所以假設你有15張訓練圖的話，那每張圖就要訓練100步，若只有10張圖，此時你的每張圖訓練步數就要改為150步，以上面的例子來說，子資料夾名稱就要改為「150_Asuka」。
另外，據說每張圖的最低訓練步數不可低於100步，也就是說，就算你有30張訓練圖你也不能把單圖訓練步數降低到50步，以上述為例就是把子資料夾名稱改為50_Asuka這樣是不行的，最低步數就是100。(這段只是提醒一下公眾說法，我本人實測的結果是只要圖片數夠多且質量不要太差，步數設成100以下好像也差不多，但如果你不是特別想做測試的話，就照大眾做法就行了。)
第三步：啟動Kohya's GUI
首先啟動Kohya’s GUI，點擊Kohya’s GUI軟體根目錄下的gui.bat即可啟動。
啟動畫面類似stable diffusion webui，啟動後會給你一個網址，注意看它給你的網址，它是會變動的，如果你同時也開啟了stable diffusion webui則這邊的啟動port會變成7861。以下圖的網址為例，就是打開瀏覽器，然後進入網址：http://127.0.0.1:7861/
第四步：設定訓練參數並開始訓練
這一步算是整個Lora訓練過程中最讓人覺得麻煩且複雜的地方了，但下面那一長串的說明，說穿了也只是設定了兩個小頁籤的幾個參數而已，不要覺得難，只是字多而已。
第一個頁籤：
打開Kohya’s GUI介面後先切到DreamboothLoRA功能頁籤，然後點擊Configuration file。
接著點擊Open按鈕讀取現成的設定檔，這邊你如果熟練的話也可以直接自己手動設定就好，不一定要讀取設定檔，讀取設定檔是懶人加新手做法。
至於現成的設定檔從哪來呢? 直接從下述網址下載就好，依你的顯卡狀況選一個下載就好，顯卡還不錯就選一般版，顯卡較低階就選低配版(一般來說顯卡記憶體有8G以上可以使用一般版)，設定檔存哪都可以，自己記得就好。
上面的網址是google雲端硬碟的介面，點進去後它會預設以文字檔開啟，這邊直接點右上角的下載鈕就可以了。
接著是再往下看到Source model頁籤，先將Model Quick Pick改為”custom”，接著在Pretrained model name or path欄位選擇你要用來訓練的基礎繪圖模組，這邊直接選擇你平常在用的繪圖模組就行了，位置通常是在”stable diffusion webui安裝資料夾\models\Stable-diffusion\”。
如果你想訓練的Lora是寫實人物就選擇寫實派的繪圖模組，例如Chilloutmix，而如果是想訓練二次元人物就選擇二次元繪圖模組，例如anything。
另外，江湖中也有傳言說這邊兩個欄位通通都要選擇stable-diffusionV1.5最好，認為這樣訓練出來的Lora相容性與泛用性更高。但我測過覺得好像沒差，我把Chilloutmix訓練出來的Lora拿去用在其它繪圖模組也沒什麼異常。
第二個頁籤：
接著再切換到Folders頁籤，這邊有三個欄位要注意：
第一個欄位是Image folder填入訓練圖來源資料夾，用我剛剛舉的例子來說就是G:\Asuka訓練圖集。注意是圖片的根資料夾，而不是「每張圖訓練步數_角色名稱」的那個子資料夾
第二個欄位是Output folder，此處是指定完成訓練的Lora模型檔要儲存的路徑，這邊依自己的習慣選擇就好。
第三個欄位是Model output name，這邊幫這次的Lora模型取個名字，這個名字也會成為Lora模型檔的檔案名稱。
其它細部設定在一開始讀入設定檔後就都自動設定好了，不用再改。當然若你已經用的熟練且進階了，可以自行修改細部設定，同時也代表你不需要看我這篇新手教學了。
主要項目都設定好後，就可以按下Train model按鈕開始訓練了。
訓練進度可以查看終端畫面，它會有個進度條，跑到100%時即代表訓練完成。這段時間略久，具體訓練時間受你的總步數以及顯卡強度而定。數十分鐘至數個小時都有可能，但即使如此，Lora已經是目前眾多自訓練繪圖元件中，訓練過程最簡易與快速的了。
訓練完成後即會產出一個Lora模型檔，儲存位置會在上一步指定的Output folder中，以我舉的例子來說就是放在G:\Asuka_Lora。
恭喜你!到這邊就算完成整個訓練流程了。
如果你本來就懂的使用Lora，那下一篇教學其實你可以跳過了，完成目前這兩篇教學所做的事，你就完整的建立起一個Lora了。
下一篇只是為純新手所寫的，有關繪圖過程中如何呼叫Lora我會在下一篇說明，這個部分其實沒什麼技術性，但真要一步一步說就是免不了一堆廢話。
參考資料：
以下提供我參考過的一些教學網站，如果我的教學讓你看不懂，可以參考下面這些教學。你可能會發現有些小細節每個網站教的都不一樣，但只要大方向對了就沒問題了，那些小細節的影響不大。
Aitrepreneur，外國人的影片
Kas Kuo Lab，中文影片
為什麼會看到廣告
277會員
90內容數
沙龍自介：
雜文派，舉凡AI介紹、科技新知、廢談網誌、小說動漫通通都寫。雖說如此，但目前以AI與科技類文章為主軸，我也不知道怎麼變這樣的，holy 媽祖。
本人不喜歡看長篇文章，也不擅長寫長篇文章，我的意思是：我的優點是廢話很少，看我一篇文不會花你太多時間。
留言0
查看全部
你可能也想看
Google News 追蹤
大家好，我是woody，是一名料理創作者，非常努力地在嘗試將複雜的料理簡單化，讓大家也可以體驗到料理的樂趣而我也非常享受料理的過程，今天想跟大家聊聊，除了料理本身，料理創作背後的成本。
哈囉～很久沒跟各位自我介紹一下了～
大家好～我是爺恩
我是一名圖文插畫家，有追蹤我一段時間的應該有發現爺恩這個品牌經營了好像.....快五年了(汗)時間過得真快！隨著時間過去，創作這件事好像變得更忙碌了，也很開心跟很多厲害的創作者以及廠商互相合作幫忙，還有最重要的是大家的支持與陪伴🥹。
嘿，大家新年快樂~ 新年大家都在做什麼呢？
跨年夜的我趕工製作某個外包設計案，在工作告一段落時趕上倒數。
然後和兩個小孩過了一個忙亂的元旦。在深夜時刻，看到朋友傳來的解籤網站，興致勃勃熬夜體驗了一下，覺得非常好玩，或許有人玩過了，但還是想寫上來分享紀錄一下~
最近在嘗試使用不同的AI生圖方式混合出圖的方式，採用A平台的優點，並用B平台後製的手法截長補短，創造出自己更想要的小說場景，效果不錯，現在以這張圖為例，來講一下我的製作步驟。
最近有空時就在看如何使用AI作圖的方式製作出有魄力的動作與構圖，恰巧在Civitai這個AI作圖網站上找到了一些有趣的人物姿態，因此發想了一些構圖，依照這些構想做出來的圖效果還算可以接受，因此在這邊記錄一下過程與步驟。
介紹如何使用AI生成圖像的五個步驟，包括選擇主題、強化主角形象、使用ChatGPT輸入提示句子、AI生成圖像工具生成、以及使用增強畫質的生成工具。
試著去訓練 LoRA 幾次後，發現一些有趣的問題... ㄜ~技術問題後面再說好了，先分享最近訓練的 LoRA YunQiuWaterColor 一個類似水彩畫風的 LoRA。
以下來欣賞幾張圖片吧!
最近在試著用 Tensor Art 訓練 LoRA，老實說，成功率...不太高，或許是我挑選訓練圖片的問題。
但訓練出來，可以給別人用(雖然根本也就是我自己用)，就感覺蠻有意思的!
最近，又訓練了一個亂塗鴉的 LoRA(YunQiuLineArt01)，我覺得還蠻有趣的，分享給您。
大叔最近在研究如何使用 TensorArt 來訓練自己的 LoRA 模型，昨晚終於測試成功了，太令人感動了，有興趣的話，請您也來試試大叔的手繪風格 LoRA YunQiuStyleColor 吧!
為了配合小說「烈火之心」試閱章節（四） -- Stable Diffusion繪製 的情節，我需要生成一副高動態的唯美圖樣，為此我使用了幾個技巧做到，就在這邊記錄下來以為後用。
Tensor Art 使用 Stable Diffusion 的各種模型，也能使用ControlNet 和 LoRA功能，根據使用者的輸入來文生圖、圖生圖，生成各種風格的高質量圖像，包括人像、動人的風景、創意的抽象畫等。
大家好，我是woody，是一名料理創作者，非常努力地在嘗試將複雜的料理簡單化，讓大家也可以體驗到料理的樂趣而我也非常享受料理的過程，今天想跟大家聊聊，除了料理本身，料理創作背後的成本。
哈囉～很久沒跟各位自我介紹一下了～
大家好～我是爺恩
我是一名圖文插畫家，有追蹤我一段時間的應該有發現爺恩這個品牌經營了好像.....快五年了(汗)時間過得真快！隨著時間過去，創作這件事好像變得更忙碌了，也很開心跟很多厲害的創作者以及廠商互相合作幫忙，還有最重要的是大家的支持與陪伴🥹。
嘿，大家新年快樂~ 新年大家都在做什麼呢？
跨年夜的我趕工製作某個外包設計案，在工作告一段落時趕上倒數。
然後和兩個小孩過了一個忙亂的元旦。在深夜時刻，看到朋友傳來的解籤網站，興致勃勃熬夜體驗了一下，覺得非常好玩，或許有人玩過了，但還是想寫上來分享紀錄一下~
最近在嘗試使用不同的AI生圖方式混合出圖的方式，採用A平台的優點，並用B平台後製的手法截長補短，創造出自己更想要的小說場景，效果不錯，現在以這張圖為例，來講一下我的製作步驟。
最近有空時就在看如何使用AI作圖的方式製作出有魄力的動作與構圖，恰巧在Civitai這個AI作圖網站上找到了一些有趣的人物姿態，因此發想了一些構圖，依照這些構想做出來的圖效果還算可以接受，因此在這邊記錄一下過程與步驟。
介紹如何使用AI生成圖像的五個步驟，包括選擇主題、強化主角形象、使用ChatGPT輸入提示句子、AI生成圖像工具生成、以及使用增強畫質的生成工具。
試著去訓練 LoRA 幾次後，發現一些有趣的問題... ㄜ~技術問題後面再說好了，先分享最近訓練的 LoRA YunQiuWaterColor 一個類似水彩畫風的 LoRA。
以下來欣賞幾張圖片吧!
最近在試著用 Tensor Art 訓練 LoRA，老實說，成功率...不太高，或許是我挑選訓練圖片的問題。
但訓練出來，可以給別人用(雖然根本也就是我自己用)，就感覺蠻有意思的!
最近，又訓練了一個亂塗鴉的 LoRA(YunQiuLineArt01)，我覺得還蠻有趣的，分享給您。
大叔最近在研究如何使用 TensorArt 來訓練自己的 LoRA 模型，昨晚終於測試成功了，太令人感動了，有興趣的話，請您也來試試大叔的手繪風格 LoRA YunQiuStyleColor 吧!
為了配合小說「烈火之心」試閱章節（四） -- Stable Diffusion繪製 的情節，我需要生成一副高動態的唯美圖樣，為此我使用了幾個技巧做到，就在這邊記錄下來以為後用。
Tensor Art 使用 Stable Diffusion 的各種模型，也能使用ControlNet 和 LoRA功能，根據使用者的輸入來文生圖、圖生圖，生成各種風格的高質量圖像，包括人像、動人的風景、創意的抽象畫等。