AI繪圖-教學：如何在stable diffusion webui上使用最新的SDXL?
注意事項：
在stable diffusion webui上使用SDXL的步驟不難，比較要注意的是SDXL的幾個重點差異，你要先依這個差異來評估自己是否要升級，以免白忙一場。
1.SDXL必須的顯卡VRAM更高，以我的RTX 3080 10GB為例，在預設情況下是跑不動的，必須在啟動參數加上--medvram才能夠使用。(原本RTX 3080還算中上等級的顯卡，結果在SDXL中突然淪為平民。)
2.SDXL的繪圖耗時更久，以我的情況來說還不錯，繪製1024*1024的圖不會超過一分鐘，據網友分享，有人畫一張圖要好幾分鐘甚至十幾分鐘(依硬體情況而不同)。
3.以前的各種外掛與元件，包括繪圖模型，controlnet與lora或多數的功能性外掛都不相容，你必須重新煉製或是等待作者更新版本。
4.SDXL可以更加理解prompt，亂畫的機率稍低一些，但手指同樣是....就那樣。
5.SDXL不需要在prompt加一堆廢話，例如master pieces, best quality等無意義的詞也能畫出不錯的圖。同樣的，負面提示(negative prompt)對於SDXL來說也不是那麼必要了。
6.SDXL在繪製大圖時效果較佳，以1024*1024為基礎值，小圖雖然也能畫但品質較差。
7.一個比較鮮明的突破點是，對於"文字"的理解力與生成力更高，能夠生成可以辨識的正確文字。
HELLO
8.需要較高的steps，至少30步，而採樣器方面，推薦DPM系列。
9.SDXL還是很新的東西，網友們也都還在摸索嚐試，有很多問題目前並沒有答案。安裝前最好先備份，有很多網友安裝過程中出現各種奇奇怪怪的錯誤。
1.使用SDXL的4個前置步驟：
1.1把stable diffusion webui更新到最新版
開啟cmd視窗，並切換到stable diffusion webui安裝資料夾下，接著執行git pull指令即可。
cmd視窗
1.2 下載SDXL模型檔
現在試玩正是時候，現在要下載模型檔方便多了，直接就能下載，之前還要填個註冊表還要抓token密碼什麼的，超麻煩。
直接到下面兩個網址，分別下載sd_xl_base_1.0與sd_xl_refiner_1.0兩個模型檔：
下載好後，直接把這兩模型檔丟到"stable diffusion webui安裝資料夾\models\Stable-diffusion\"這個路徑即可，跟一般模型的放置路徑相同。
1.3下載VAE檔案
到下列網址下載VAE檔案：
下載後把VAE檔案丟到"stable diffusion webui安裝資料夾\models\VAE\"這個路徑即可，跟一般VAE的放置路徑相同。
1.4 確保使用到正確的VAE檔
SDXL要使用專用的VAE檔，也就是第三步下載的那個檔案。
開啟stable diffusion webui的設定介面，然後切到User interface頁籤，接著在Quicksettings list這個設定項中加入sd_vae。
設定介面
完成後儲存設定並重啟stable diffusion webui介面，這時在繪圖介面的上方即會出現vae的快速切換下拉選單，記得使用SDXL時要選用sdxl_vae。
繪圖介面
2.基本使用步驟
2.1文生圖模式：
我們在一開始就下載了兩個模型，其中sd_xl_base_1.0是用於文生圖模式。
到這個階段前置步驟都完成了，之後的使用方式就是跟以往的繪圖操作一模一樣了，唯一重點就是記得繪圖模組要選擇sd_xl_base_1.0，並且vae要選擇sdxl_vae。
繪圖介面
SDXL的模型載入會較慢，繪圖耗時也較久，這是必然的。
繪圖完成後的示意圖如下，基本上就跟平常的操作結果相同。
繪圖結果
2.2圖生圖模式：
在我們下載的兩個模型檔中，sd_xl_refiner_1.0是專門用於img2img模式，用來提高圖片精度。
常見的操作流程是直接把文生圖模式的圖直接傳到img2img中做二次精修，當然一般圖片也是能用。
操作步驟與以前的img2img一模一樣，唯一的重點同樣是記得把繪圖模組切換為sd_xl_refiner_1.0，而vae同樣必須使用sdxl_vae。
繪圖介面
操作邏輯也沒變，如果僅僅是希望對原圖做微調精修的話，Denoising strength就不要調的太高。同樣的，繪圖結果也是隨機的，不一定修了就一定會更好。
img2img操作示意圖：
繪圖結果
base原圖
refine精修結果，denoising strength=0.2
補充：
在我前面的兩篇文章中有提到，SDXL的重點是它建立起來的基礎，我們可以期待的是以它為基礎所建造出來的各種特製模組。初期的數量還不算多，但各路大神們的動作也算很快，很多重要的模組或lora都開始出現SDXL版本了。
我在此只先推薦一個知名且必用又好用的模組：DreamShaper XL1.0。
當然不只這個，只要在C站以SDXL或是XL當關鍵字搜尋，已經可以找到很多了, 相信之後成長的速度會越來越快。
同一組prompt使用dream shaper XL繪製
你可能也想看
