恣意發揮 vs 照本宣科:Stable Diffusion取樣方法的差異

更新於 2023/04/05閱讀時間約 4 分鐘

  我不是程式設計師,是以藝術創作的角度撰寫心得。

先說結論:
  演算Img2Img時,Sampling methods(取樣方法)中Karras類型比較忠於原圖,非Karras類型比較放飛自我
黑米BR原畫
  原本沒有這麼強調瞳孔的雙色和頭髮的挑染,但因為使用的CyriousMix1.4演算模組(model)完全抓不到這兩部分(註*),所以刻意突顯了出來。
  *也有使用其他的演算模組嘗試,但這兩部分的實現程度也都差不多。

  以下演算成果的所有設定都相同,更動的只有Sampling method:

cyriousmix_14.safetensors
Sampling steps 30
Denoising strength 0.3
CFG Scale 12
Width 500 x Height 700
Batch count 1
Batch size 1
Seed 2910326828
+Prompts
masterpiece, best quality, 2girls, twins, blue shirt, white dress, bare shoulders, white pants, khaki pants, purple eyes, blue eyes, red hair, gold hair, multicolored eyes, multicolored hairs, red hair with gold highlights, gold hair with red highlights, purple eyes with blue tint, blue eyes with gold tint, smile
-Prompts
(painting by bad-artist-anime:0.9), (painting by bad-artist:0.9), watermark, text, error, blurry, jpeg artifacts, cropped, worst quality, low quality, normal quality, jpeg artifacts, signature, watermark, username, artist name, (worst quality, low quality:1.4), (bad anatomy), nsfw, (extra fingers), (bad fingers), extra sleeves, red letter, extra letters,
圖1
  Euler和Heun的演算結果我「完全看不出」差異。LMS則是一如既往地不適合動漫風格的演算模組,抑或是需要很大量的sampling steps?
圖2
  DPM fast大概是用來快速判斷結果的演算法。
圖3

  撇開比較特殊的LMS和DPM fast不談,可以很明顯地看出名字中有「Karras」的取樣方法在同樣的設定下(特別是相同的Sampling steps、Denoising strength、CFG Scale、Seed),其演算結果是比較「忠於」原圖的。

  盡管如此,以下問題是所有演算法都有的:
  1. 所有取樣方法均「無法正確算出雙色瞳」的效果,儘管原圖和+prompts中都有提供。
  2. 紅髮挑金」所有的取樣方法都有算出來,然而「金髮挑紅」非Karras的取樣方法都只有鬢角變紅,而Karras系列與其說是有算出來,不如說是因為比較忠於原圖而保留下來的,但DPM2 Karras和DPM2 a Karras仍然沒有保留下來。
  3. 手指的問題很大--雖然幾乎所有的演算模組都有手指的問題,但CyriousMix是手指問題非常明顯的一種,偏偏我又很喜歡它的風格,未來可能需要靠Control Net來解決了。
  為何頭髮的顏色會影響演算的結果,個人認為是用於訓練的作品中,挑染其他顏色的紅髮比較常見,但挑染其他顏色的金髮卻很少見的緣故。

  換言之,可說是AI因為人類「偏好」而產生「歧視」的例子?

  下圖是我實際選用的版本。這個版本的+Prompts我忘了保存下來,但我記得也是換了很多次Seed才有金髮挑紅的成果出現,而且+Prompts應該有額外添加「two-tone hair」的關鍵詞。
實際選用的版本
  我原本的生圖目的是更新線上連載小說的封面,下圖是手動調整過後的最終成果:
最終版本 - 不得不說AI版本比我畫的要可愛太多了......Orz

  有興趣的話,歡迎前往KadoKado閱讀喔(自產自推)。

為什麼會看到廣告
avatar-img
82會員
104內容數
筆者探索各種感興趣事物的紀錄。 *副帳非主流政治沙龍《黑米BR不政確》:https://vocus.cc/salon/BRiceP
留言0
查看全部
avatar-img
發表第一個留言支持創作者!
黑米BR的沙龍 的其他內容
  最近玩了個台灣製的遊戲,內容不多,玩了三小時就進入「片尾曲」。   這時我突發奇想,擷取一張截圖,然後用這張圖跑Stable Diffusion的Img2Img(以圖算圖)。   因為非業配,沒有取得原圖授權,所以原圖我就不貼了,但有看過結局的人,一定能從下面幾張圖猜出原圖出處: +Prompt
  2023/Apr/8 補充更新 - 想訓練AI模型的人,建議正常安裝Python和Git,理由如下:
ChatGPT創作大賽投稿的短篇推理懸疑故事,見證了ChatGPT的無厘頭...
  最近玩了個台灣製的遊戲,內容不多,玩了三小時就進入「片尾曲」。   這時我突發奇想,擷取一張截圖,然後用這張圖跑Stable Diffusion的Img2Img(以圖算圖)。   因為非業配,沒有取得原圖授權,所以原圖我就不貼了,但有看過結局的人,一定能從下面幾張圖猜出原圖出處: +Prompt
  2023/Apr/8 補充更新 - 想訓練AI模型的人,建議正常安裝Python和Git,理由如下:
ChatGPT創作大賽投稿的短篇推理懸疑故事,見證了ChatGPT的無厘頭...
你可能也想看
Google News 追蹤
Thumbnail
*合作聲明與警語: 本文係由國泰世華銀行邀稿。 證券服務係由國泰世華銀行辦理共同行銷證券經紀開戶業務,定期定額(股)服務由國泰綜合證券提供。   剛出社會的時候,很常在各種 Podcast 或 YouTube 甚至是在朋友間聊天,都會聽到各種市場動態、理財話題,像是:聯準會降息或是近期哪些科
Thumbnail
什麼課可以幫助我探索新的職涯方向? 上完職游這堂『職涯探索課』,可能可以給大家一些靈感。課程以心理學為基礎,使用職遊旅人卡進行職業興趣探索。不管是想轉職卻不知從何開始的你,或是想尋找下班後斜槓的靈感的妳。一起來聽聽看吧!
Thumbnail
終究靈魂都會好好走向愛與成長的方向。這樣就好。不必要有現世的和解,也不必要因我而有何改變(這種期待有時會變自以為是)——大家各自都已經盡力,這樣就好。
二九二:「傷寒」,脈浮而緩,手足自溫者,繫在「太陰」;「太陰」當身發黃;若小便自利者,不能發黃;至七八日,雖暴煩,下利日十數行,必自止,以脾家實,腐穢當去故也。 「傷寒,脈浮而緩,手足自溫者,繫在太陰;太陰當身發黃;若小便自利者,不能發黃」,與陽明篇第二〇三條辨的內容一樣,在此節錄內容如下,「傷寒
二四八:「陽明病」,自汗出,若發汗,小便自利者,此為津液內竭,雖鞕不可攻之,當須自欲大便,宜蜜煎導而通之,若「土瓜根」及「大豬膽汁」皆可為導。 大豬膽汁方 大豬膽汁一枚,瀉汁,和醋少許,以灌谷道中,如一食頃,當大便出。 蜜煎導法 蜜七合,一味,納銅器中,微火煎之,稍凝似飴狀,攪之勿令焦著。欲
二〇三:「傷寒」脈浮而緩,手足自溫者,是謂繫在「太陰」;「太陰」者,身當發黃;若小便自利者,不能發黃;至七八日,大便鞕者,為「陽明」病也。 「傷寒脈浮而緩,手足自溫者」,一般來說傷寒的脈是浮緊的脈,而浮脈代表病在表,緩脈雖然是一息四至,但是跳起來比較弛緩鬆懈,代表腸胃比較虛弱,食慾不佳,雖有表證但是
Thumbnail
快樂星人章魚P的重啟人生,地球是很危險又很複雜滴~章魚P的原罪會是那種跟無知一體兩面的純良嗎?哄小孩的道具再也解決不了小孩的問題了,要怎麼哄?莫怪乎被叫作「惡夢版/暗黑版的哆啦A夢」。
Thumbnail
在這即將要開學的暑假,原本溫馨的家庭過著快樂的下午,沒想到因為一件事而使家庭分離,不知何時可以重逢相聚。
Thumbnail
其實我很意外臺灣動畫的技術表現力已經可以做到這個程度了,可是《重甲機神》真的好尷尬喔!看到最後會想,製作的人大概很喜歡這個作品和角色們吧,可惜這份喜歡沒有辦法透過動畫傳遞給出來。
Thumbnail
故事調性很像日本的晨間劇,但是不用改編就已經比影視好看!我錯了,這麼晚才好好看完《來自清水的孩子》系列,這是「給OOOOOO的一封情書」程度的作品!
Thumbnail
*合作聲明與警語: 本文係由國泰世華銀行邀稿。 證券服務係由國泰世華銀行辦理共同行銷證券經紀開戶業務,定期定額(股)服務由國泰綜合證券提供。   剛出社會的時候,很常在各種 Podcast 或 YouTube 甚至是在朋友間聊天,都會聽到各種市場動態、理財話題,像是:聯準會降息或是近期哪些科
Thumbnail
什麼課可以幫助我探索新的職涯方向? 上完職游這堂『職涯探索課』,可能可以給大家一些靈感。課程以心理學為基礎,使用職遊旅人卡進行職業興趣探索。不管是想轉職卻不知從何開始的你,或是想尋找下班後斜槓的靈感的妳。一起來聽聽看吧!
Thumbnail
終究靈魂都會好好走向愛與成長的方向。這樣就好。不必要有現世的和解,也不必要因我而有何改變(這種期待有時會變自以為是)——大家各自都已經盡力,這樣就好。
二九二:「傷寒」,脈浮而緩,手足自溫者,繫在「太陰」;「太陰」當身發黃;若小便自利者,不能發黃;至七八日,雖暴煩,下利日十數行,必自止,以脾家實,腐穢當去故也。 「傷寒,脈浮而緩,手足自溫者,繫在太陰;太陰當身發黃;若小便自利者,不能發黃」,與陽明篇第二〇三條辨的內容一樣,在此節錄內容如下,「傷寒
二四八:「陽明病」,自汗出,若發汗,小便自利者,此為津液內竭,雖鞕不可攻之,當須自欲大便,宜蜜煎導而通之,若「土瓜根」及「大豬膽汁」皆可為導。 大豬膽汁方 大豬膽汁一枚,瀉汁,和醋少許,以灌谷道中,如一食頃,當大便出。 蜜煎導法 蜜七合,一味,納銅器中,微火煎之,稍凝似飴狀,攪之勿令焦著。欲
二〇三:「傷寒」脈浮而緩,手足自溫者,是謂繫在「太陰」;「太陰」者,身當發黃;若小便自利者,不能發黃;至七八日,大便鞕者,為「陽明」病也。 「傷寒脈浮而緩,手足自溫者」,一般來說傷寒的脈是浮緊的脈,而浮脈代表病在表,緩脈雖然是一息四至,但是跳起來比較弛緩鬆懈,代表腸胃比較虛弱,食慾不佳,雖有表證但是
Thumbnail
快樂星人章魚P的重啟人生,地球是很危險又很複雜滴~章魚P的原罪會是那種跟無知一體兩面的純良嗎?哄小孩的道具再也解決不了小孩的問題了,要怎麼哄?莫怪乎被叫作「惡夢版/暗黑版的哆啦A夢」。
Thumbnail
在這即將要開學的暑假,原本溫馨的家庭過著快樂的下午,沒想到因為一件事而使家庭分離,不知何時可以重逢相聚。
Thumbnail
其實我很意外臺灣動畫的技術表現力已經可以做到這個程度了,可是《重甲機神》真的好尷尬喔!看到最後會想,製作的人大概很喜歡這個作品和角色們吧,可惜這份喜歡沒有辦法透過動畫傳遞給出來。
Thumbnail
故事調性很像日本的晨間劇,但是不用改編就已經比影視好看!我錯了,這麼晚才好好看完《來自清水的孩子》系列,這是「給OOOOOO的一封情書」程度的作品!