AI繪圖從零開始:TensorArt (2) 用LoRA調整畫風

更新於 發佈於 閱讀時間約 2 分鐘

前一篇介紹了如何簡單的在TensorArt網站快速的生成動漫同人圖。
這篇要進一步的介紹使用LoRA調整畫風、服裝等等。

什麼是LoRA?

LoRA(Low-Rank Adaptation)是一種讓大模型「只需訓練少量參數」的技術。它在模型原始權重上加入兩個低階矩陣,以最小的改動達到微調效果。這樣可以節省大量記憶體與運算資源,讓普通電腦也能客製化大模型。由於只需保存小小的LoRA權重檔,分享和套用都十分方便,進而在繪圖社群上大量的流行。

怎麼安裝LoRA?

回到TensorArt的生圖介面點選「添加LoRA(風格)

raw-image


畫面會彈出LoRA的搜尋器,我們可以在檢索欄輸入「Anime」就能快速篩選出各種動畫風格的LoRA。這篇實測選擇了「Anime Enchancer XL」 算是個知名的人氣LoRA。

raw-image


套用LoRA後,模型設定面板會變成這樣:

raw-image

會看到有一個綠色的條狀控制桿,右邊顯示數字「0.8」。
這個數字越大,生成出來的圖片就越會受到這個LoRA的影響,相反地,數字調小則會減少這個LoRA的影響程度。

通常是在有多個LoRA,彼此可能會互相衝突的情況下才要調整這個數字。
總之直接以0.8嘗試。

小提醒:有些LoRA會設定觸發關鍵詞,在安裝的時候會如下圖一樣跳提示出來,通常就按「全部使用」就好。(不一定每個LoRA都有)

raw-image

套用好LoRA後按下「在線生成」就可以開始算圖了。

實際測試結果

首先複習一下沒有LoRA之間是什麼樣的風格。

基礎模型:Animagine XL( LoRA:無 )

raw-image

比對一下套用LoRA之後的風格

基礎模型:Animagine XL( LoRA:Anime Enchancer XL)

raw-image

變得相當氣勢滂薄!
而且明顯得細節變得非常多。(雖然手指還是怪怪的)

多嘗試幾種不同的LoRA感受一下。
基礎模型:Animagine XL( LoRA:Yaungpeng | Style LoRa)
一種低彩度風格。

raw-image

基礎模型:Animagine XL( LoRA:yukata)
換個衣服之類的也是很輕鬆。

raw-image

小提醒:記得把原本關於服裝的提示詞刪掉,不然會跑出一個四不像就會很困擾。
(當然如果你是喜歡這種創新風格的話,另當別論)

raw-image

以上本篇完。

如果喜歡這類主題的話,歡迎加入「幻詠 Gen Ai Studio」沙龍。
定期分享生成式AI的應用和教學。



avatar-img
2會員
51內容數
探索ChatGPT等生成式AI 的各領域應用 1.分享 AI 工具的實測結果&提示詞技巧 2.分享 AI 創作內容
留言
avatar-img
留言分享你的想法!

































































幻詠 Gen Ai Studio 的其他內容
Tensor.Art為繪圖模型雲端服務,能夠自訂採樣器、調度器和採樣次數等參數,自由度更高。本篇示範AnimagineXL模型,使用正反提示詞並調高採樣至25與60,生成遠坂凜的高精緻度動漫同人圖。
Tensor.Art為繪圖模型雲端服務,能夠自訂採樣器、調度器和採樣次數等參數,自由度更高。本篇示範AnimagineXL模型,使用正反提示詞並調高採樣至25與60,生成遠坂凜的高精緻度動漫同人圖。
你可能也想看
Google News 追蹤
Thumbnail
這篇要搭建一個同時生成寫實照片跟動漫風格圖片的工作流,還可以幫線稿上色。
Thumbnail
AI生成圖片並非完全可控,所以需要很多額外手段去控制,這篇要來試試幾個方法讓生成的圖片更加可控。
Thumbnail
Pixai.art是生成動漫風格的免費工具,基於開源的Stable Diffusion生態,同樣擁有ControlNet、Lora等強大模型工具。
Thumbnail
這篇要講的圖像提示詞概念是在AI繪圖的過程中輸入圖片,讓AI去理解圖像內容,或是直接參考圖像的構圖或色彩,再產生新的圖片。 雖然我最常用的是文字提示詞的方式生圖,但是圖像提示詞的應用比文字提示詞更廣也更加複雜,尤其在生成影片的範疇。 即使OpenAI在近日發表了強大的文生影片的Sora模型,但畢
Thumbnail
隨著AI技術的進步,AI繪圖工具也越來越普及,讓所有人都能輕鬆創作出精美圖像,以下推薦 8 個免費 AI 繪圖工具,讓你不用花錢,也能發揮創意。
Thumbnail
可能包含敏感內容
這邊紀錄使用Bing images create 生成原圖並利用Tensor art
Thumbnail
Tensor Art 使用 Stable Diffusion 的各種模型,也能使用ControlNet 和 LoRA功能,根據使用者的輸入來文生圖、圖生圖,生成各種風格的高質量圖像,包括人像、動人的風景、創意的抽象畫等。
Thumbnail
本篇文章參考 Youtube 影片(...二次元模型...)內容,為大家找出影片中的模型,直接作圖測試,您直接連結過去,就可以在 TensorArt 內直接使用囉!
Thumbnail
Transformer被廣泛運用在各種生成式AI,激起了本篇作者的好奇心,是否能用Transformer學到所有先驗知識,足以讓它由一張2D圖片還原3D物件。本篇也從Github上面找到由ZexinHe開源的LRM實作程式,讓有興趣的人可以深入研究。
Thumbnail
這篇要搭建一個同時生成寫實照片跟動漫風格圖片的工作流,還可以幫線稿上色。
Thumbnail
AI生成圖片並非完全可控,所以需要很多額外手段去控制,這篇要來試試幾個方法讓生成的圖片更加可控。
Thumbnail
Pixai.art是生成動漫風格的免費工具,基於開源的Stable Diffusion生態,同樣擁有ControlNet、Lora等強大模型工具。
Thumbnail
這篇要講的圖像提示詞概念是在AI繪圖的過程中輸入圖片,讓AI去理解圖像內容,或是直接參考圖像的構圖或色彩,再產生新的圖片。 雖然我最常用的是文字提示詞的方式生圖,但是圖像提示詞的應用比文字提示詞更廣也更加複雜,尤其在生成影片的範疇。 即使OpenAI在近日發表了強大的文生影片的Sora模型,但畢
Thumbnail
隨著AI技術的進步,AI繪圖工具也越來越普及,讓所有人都能輕鬆創作出精美圖像,以下推薦 8 個免費 AI 繪圖工具,讓你不用花錢,也能發揮創意。
Thumbnail
可能包含敏感內容
這邊紀錄使用Bing images create 生成原圖並利用Tensor art
Thumbnail
Tensor Art 使用 Stable Diffusion 的各種模型,也能使用ControlNet 和 LoRA功能,根據使用者的輸入來文生圖、圖生圖,生成各種風格的高質量圖像,包括人像、動人的風景、創意的抽象畫等。
Thumbnail
本篇文章參考 Youtube 影片(...二次元模型...)內容,為大家找出影片中的模型,直接作圖測試,您直接連結過去,就可以在 TensorArt 內直接使用囉!
Thumbnail
Transformer被廣泛運用在各種生成式AI,激起了本篇作者的好奇心,是否能用Transformer學到所有先驗知識,足以讓它由一張2D圖片還原3D物件。本篇也從Github上面找到由ZexinHe開源的LRM實作程式,讓有興趣的人可以深入研究。