ComfyUI研究 - SDXL Lightning 模型測試

更新於 發佈於 閱讀時間約 4 分鐘

不免俗的放一下工作流。

raw-image


這個工作流跟之前的這篇ComfyUI 研究 - LCM & SDXL Turbo用的一樣,都是為了比較不同模型的表現去搭建。

開源模型的推出速度很快,如果都要測試勢必要花費不少時間下載跟調整參數。

所以這篇只是大致比較一下SDXL Turbo的一步出圖跟SDXL Lightning的四步出圖效果比較。

測試用的SDXL Turbo模型是sd_xl_turbo_1.0_fp16.safetensors,這是官方䆁出的基底模型。

SDXL Lightning用的則是juggernautXL_v9Rdphoto2Lightning.safetensors,如果有用過fooocus這個介面應該會注意到在某次更新後就會從原本的SDXL官方模型變成juggernautXL_version6Rundiffusion.safetensors模型,表示這個模型的表現比起官方模型要來得好,當然,這些模型都是基於官方模型再去訓練出來的,所以在生圖的時候會有一些特定的風格方向。

在參數設定上,CFG皆為1,SDXL Turbo使用 1 step,SDXL Lightning使用4 step,採樣器都使用dpmpp_sde(dpm++ sde),Scheduler使用normal,Seed固定為1,生成圖像大小512*512。

測試過程中只會改變正向文字提示詞,負向文字提示詞保持空白。

基本上除了首次執行時要載入模型會花比較長時間,SDXL Turbo模型的生成速度還是會比SDXL Lightning模型要快一點點。

我使用的顯示卡是NVIDIA GeForce RTX 3080 Ti Laptop Gpu 16G。

以下圖片左邊為SDXL Turbo,右邊為SDXL Lightning。

  • a cute cat
raw-image
  • 1girl
raw-image


  • a boy
raw-image


  • frog
raw-image


  • photorealistic, a man, rainning,
raw-image


  • comic book, batman suit, pig,
raw-image


  • watercolor, tower, garden,
raw-image


經過簡單的文字提示詞測試可以發現SDXL Turbo的基底模型很容易生成繪畫風格的圖片,juggernautXL_v9Rdphoto2Lightning.safetensors這個模型則是偏向生成照片風格的圖片。


下面再用複雜的文字提示詞測試這兩個模型。

  • moody aesthetic, beautiful cozy, cramped bedroom with floor to ceiling glass windows overlooking a cyberpunk city at night, view from top of skyscraper, white bedsheets, bookshelves, thunderstorm outside with torrential rain, detailed, high resolution, photorrealistic, dark, gloomy,
raw-image


  • A hyperdetailed photograph of a Cat dressed as a mafia boss holding a fish walking down a Japanese fish market with an angry face, 8k resolution, best quality, beautiful photograph, dynamic lighting,
raw-image


  • a woman, flat shading, bizarre technology, faded colors, faded bright colors, cyber-inspired typography, futuristic imagery, retrofuturism graphic designe, Holographic and Reflective Elements, Geometric Influences, strait lines, space thriller movie poster, Bauhaus, shapes, lines, abstract
raw-image


即使使用更複雜的提示詞,只要沒有強調照片或真實風格,SDXL Turbo還是會生成較接近繪畫風格的圖片,在身體結構的合理性表現上也會比較差一點。


下面是改用juggernautXL提供的建議圖像尺寸832*1216後生成的圖像,因為SDXL Turbo會生成好幾個頭身的詭異圖片,就不放上來了。

raw-image


留言
avatar-img
留言分享你的想法!
D&Y熊繪生-avatar-img
2024/03/20
很棒的對照,我用CPU跑SD太費時,沒法享受模型訓練的體驗。
avatar-img
Frank Plaza
9.7K會員
88內容數
AI的時代已經來臨
Frank Plaza的其他內容
2024/04/06
這篇要搭建一個同時生成寫實照片跟動漫風格圖片的工作流,還可以幫線稿上色。
Thumbnail
2024/04/06
這篇要搭建一個同時生成寫實照片跟動漫風格圖片的工作流,還可以幫線稿上色。
Thumbnail
2024/04/02
測試一下InstantID
Thumbnail
2024/04/02
測試一下InstantID
Thumbnail
2024/04/01
測試一下 IPAdapter FaceID
Thumbnail
2024/04/01
測試一下 IPAdapter FaceID
Thumbnail
看更多
你可能也想看
Thumbnail
「欸!這是在哪裡買的?求連結 🥺」 誰叫你太有品味,一發就讓大家跟著剁手手? 讓你回購再回購的生活好物,是時候該介紹出場了吧! 「開箱你的美好生活」現正召喚各路好物的開箱使者 🤩
Thumbnail
「欸!這是在哪裡買的?求連結 🥺」 誰叫你太有品味,一發就讓大家跟著剁手手? 讓你回購再回購的生活好物,是時候該介紹出場了吧! 「開箱你的美好生活」現正召喚各路好物的開箱使者 🤩
Thumbnail
最近在嘗試使用不同的AI生圖方式混合出圖的方式,採用A平台的優點,並用B平台後製的手法截長補短,創造出自己更想要的小說場景,效果不錯,現在以這張圖為例,來講一下我的製作步驟。
Thumbnail
最近在嘗試使用不同的AI生圖方式混合出圖的方式,採用A平台的優點,並用B平台後製的手法截長補短,創造出自己更想要的小說場景,效果不錯,現在以這張圖為例,來講一下我的製作步驟。
Thumbnail
來測試SDXL Lightning模型是不是真的很神奇。
Thumbnail
來測試SDXL Lightning模型是不是真的很神奇。
Thumbnail
這篇要搭建製作透明背景素材的工作流。
Thumbnail
這篇要搭建製作透明背景素材的工作流。
Thumbnail
這一篇要測試一下Video Linear CFG Guidance這個節點,在網路上很多的教學影片跟網友分享的工作流中會看到這個節點,據說這個節點不只可以用在生成影片的工作流中,也可以使用在一般的生成圖片工作流中。
Thumbnail
這一篇要測試一下Video Linear CFG Guidance這個節點,在網路上很多的教學影片跟網友分享的工作流中會看到這個節點,據說這個節點不只可以用在生成影片的工作流中,也可以使用在一般的生成圖片工作流中。
Thumbnail
以​文字​建立​影像,有很多功能如下: 完成提示詞之後,選擇功能設定 1.模型版本:內有兩個模型 Image1屬於照片和插圖風格,Image2擬真人版風格,我還是喜歡Image2風格比較好看。 2.比例:3:4或4:3或1:1或16:9,這個有別於目前AI生圖都是1:1版型,這可以依據您想要使
Thumbnail
以​文字​建立​影像,有很多功能如下: 完成提示詞之後,選擇功能設定 1.模型版本:內有兩個模型 Image1屬於照片和插圖風格,Image2擬真人版風格,我還是喜歡Image2風格比較好看。 2.比例:3:4或4:3或1:1或16:9,這個有別於目前AI生圖都是1:1版型,這可以依據您想要使
Thumbnail
這篇介紹 Allor Plugin 的影像合成用節點。
Thumbnail
這篇介紹 Allor Plugin 的影像合成用節點。
Thumbnail
這是一個簡單的工作流,可以對輸入的圖片進行3D重建
Thumbnail
這是一個簡單的工作流,可以對輸入的圖片進行3D重建
追蹤感興趣的內容從 Google News 追蹤更多 vocus 的最新精選內容追蹤 Google News