Stable Diffusion練習,小說封面

更新於 2024/02/01閱讀時間約 3 分鐘
完成品

完成品

前言

這篇要來分享使用Stable Diffusion加上拼貼擴展技巧如何製作自己想要的情境圖。

在我特意使用拼貼技巧的圖中,大部分都是為了製作出Stable Diffusion不熟悉的構圖或情境,例如:

Stable Diffusion練習,友情

想要的效果是N字型的人物構圖,但是Stable Diffusion其實不熟悉人物倒過來的樣子,需要自己拼貼旋轉。


而本篇的情況也相似,我需要替自己的小說製作封面,需要傳達出靜謐祥和的氛圍,並且要有主角捧著花站在花海中的構圖。這點Stable Diffusion一樣面臨了難以用語言敘述就達到目的的描述性限制,因此我需要使用拼貼擴展的手法來製作。


目的

女主角以祥和的表情站在一片野百合花海之中,手裡捧著一束百合花,背景是大地,山脈以及下沉的巨大月亮。

象徵女主角在整本小說的冒險後,終於從終日惶惶不安的心理困境解脫,獲得了寧靜與勇氣。


手法

第一步,在搜尋引擎上尋找一張人物手捧著花束的圖片,並以此圖片為基礎,使用OpenPose(前處理器為dw_openpose_full)來摘取骨架圖:

骨架圖

骨架圖

使用真人照片的原因是,我偏好生成擬真系的圖片,使用ACG圖片會造成比較明顯的臉部形變,且ACG圖片的人物姿態都比較誇大,在生成擬真圖片時姿態容易過分扭曲。

根據此骨架圖,我使用女主角的訂製LoRA生成了十幾二十張圖片,取得我覺得最貼合我印象的圖,作為素材繼續加工:

素材圖

素材圖

現在的問題是,女主角的衣服有點怪怪的,且花朵也太小束了,不夠明顯,因此我先使用邊緣線(canny)前處理器,將圖樣的邊緣線摘取出來,再使用繪圖軟體將月亮的邊緣線移動到山脈後方,造成月亮即將下沉至地平線下的感覺,順便把肩膀怪怪的布料修正掉:

移動月亮後的邊緣線參考圖

移動月亮後的邊緣線參考圖

使用這個參考圖,加上原本的提示詞,Stable Diffusion能很聰明地知道後面這個超大的圓圈就是月亮,因此重新計算了光源位置,產生一個姿態色調類似,但是光源大不相同的半成品圖:

光影修正後的半成品圖

光影修正後的半成品圖

由於手上的百合花束太小,我使用了Sketch Inpaint,直接塗上醜不拉嘰的花束在這張圖上,然後請Stable Diffusion來化腐朽為神奇:

Stable Diffusion基礎 -- 塗鴉(Sketch)

將百合花束重繪的半成品

將百合花束重繪的半成品

最後,我需要將這張直長圖擴展成寬版圖,以符合小說封面需要的格式,我直接使用了在 Stable Diffusion練習,全員靜默! 用過的擴展技巧,將這張半成品的左右兩邊都擴展出去:


先擴展右邊的圖片

先擴展右邊的圖片

將擴展的圖片黏回原本圖片

將擴展的圖片黏回原本圖片

擴展左邊圖片,使用繪圖軟體大略繪製想要的背景

擴展左邊圖片,使用繪圖軟體大略繪製想要的背景

使用局部重繪搞定背景

使用局部重繪搞定背景


擴展後的圖片再接著使用繪圖軟體的copy/paste將百合花貼成花海後使用Stable Diffusion重繪,再經過一些色彩調整後,完成品就出現了。

在色彩調整的過程中,我發覺角色眼睛的色彩調整非常重要。原本小說中的設定女主角的瞳孔顏色是法蘭絨深藍,因此需要選取整個瞳孔然後調色,且在原本的眼睛高光區點上全白的高光,雖然只有2X2個像素長寬,但銳利的白點讓角色變得非常有精神。


這再再證明人腦是非常有效率的面部辨識器,一張2300X1150的圖,人類的觀賞視線還是會不知不覺被2X2的純白眼睛高光吸引過去。


祝大家AI生圖愉快!

avatar-img
21.6K會員
364內容數
寫奇幻小說,畫圖,心得,各式各樣作品的故鄉。
留言0
查看全部
avatar-img
發表第一個留言支持創作者!
我個人在碰到很滿意的構圖,但是手部亂七八糟的時候,最常用的方法除了人偶法之外,就是直接接相片的圖,或者靠著障礙物或光影遮蔽手部細節,這樣雖然沒有半分人體繪畫的能力,還是能勉強做出自己想要的圖。
這篇要示範的圖片,主要是展示在AI算圖時,如何克服不常見角度造成的問題。
這張圖的規劃是使用單點透視法,配上簡單的三角構圖以及對比配色(亮紅與深綠)來強調人物的存在感與周圍環境的不友善。
從三月開始到現在,學習AI算圖差不多半年。這半年來,遇過最困難的挑戰,就是如何建構多人構圖。
這篇來簡單地講如何使用簡單的inpaint快速做出自己想要的視覺設計圖。 這張圖是為了替小說中的某篇章節而產出的視覺設計,讓我在寫小說時有所參照。感謝這張圖給我的視覺刺激,讓我能順利寫完整段劇情的大綱。
這篇來講一下如何使用複數素材來拼接出一張完整的作品。 這張圖用於我的小說的概念插畫:渡鴉召喚師 -- Stable Diffusion繪製上
我個人在碰到很滿意的構圖,但是手部亂七八糟的時候,最常用的方法除了人偶法之外,就是直接接相片的圖,或者靠著障礙物或光影遮蔽手部細節,這樣雖然沒有半分人體繪畫的能力,還是能勉強做出自己想要的圖。
這篇要示範的圖片,主要是展示在AI算圖時,如何克服不常見角度造成的問題。
這張圖的規劃是使用單點透視法,配上簡單的三角構圖以及對比配色(亮紅與深綠)來強調人物的存在感與周圍環境的不友善。
從三月開始到現在,學習AI算圖差不多半年。這半年來,遇過最困難的挑戰,就是如何建構多人構圖。
這篇來簡單地講如何使用簡單的inpaint快速做出自己想要的視覺設計圖。 這張圖是為了替小說中的某篇章節而產出的視覺設計,讓我在寫小說時有所參照。感謝這張圖給我的視覺刺激,讓我能順利寫完整段劇情的大綱。
這篇來講一下如何使用複數素材來拼接出一張完整的作品。 這張圖用於我的小說的概念插畫:渡鴉召喚師 -- Stable Diffusion繪製上
你可能也想看
Google News 追蹤
Thumbnail
*合作聲明與警語: 本文係由國泰世華銀行邀稿。 證券服務係由國泰世華銀行辦理共同行銷證券經紀開戶業務,定期定額(股)服務由國泰綜合證券提供。   剛出社會的時候,很常在各種 Podcast 或 YouTube 甚至是在朋友間聊天,都會聽到各種市場動態、理財話題,像是:聯準會降息或是近期哪些科
Thumbnail
這個應用情境可能是,如果你有自己的產品想要以QRcode來行銷,而「文生圖」(txt2img)的結果又無法與你的實際想像契合時,那麼用你的實際產品做為基底的圖生圖(img2img)QRcode就是一個不錯的選項。
Thumbnail
這次的測試純粹是我個人好奇同一組繪圖prompt分別使用在真人風格與動漫風格的model下,會有什麼差別? 真人風格的model使用Basil mix,動漫風格的model使用anything-v4.5。Lora來源為C站的瑪奇瑪Lora。
Thumbnail
本教學使用Automatic 1111介面   AI繪圖風行至今,網上已有不少中文教學,包括教導如何訓練LoRA、LoCon等模型的文章,而訓練上述模型時,通常會經過一道「Preprocess Images」工序,中文稱為「圖片預處理」。
Thumbnail
stable diffusion 是一款AI繪圖軟體,你可以免費把stable diffusion算出來的圖免費拿來商用,但是像我的電腦因為顯卡太舊而無法快速運行,而浪費很多時間,你只要準備一個google帳號即可。
Thumbnail
AI 每天每週都在進步,我寫在 繪圖0能者的AI藝術入門手冊 的推薦軟體安裝,很快就推出新版了,所以,我把 Automatic1111 最新版本安裝方式寫在這裡,以便盡我所能為各位讀者更新。 建議使用 windows 桌機PC,具有 Nvidia GTX1660以上等級的獨立顯示卡,算圖會比較容易。
Thumbnail
去這邊點選開啟sd的webui-user.bat程式先會跟你說9009 把這個bat右鍵筆記本編輯會發現,set PYTHON=路徑是空的,那我們就去把後面的路徑補上改成下面這個 set PYTHON=D:\StableDiffusion\system\python\python.exe 接下來
Thumbnail
注意! 以下為不專業解釋~若有錯誤請指教。 使用 ai 產出圖片需要一個附檔名為 .ckpt 的模型訓練檔案~ai 會使用這個訓練檔案內的資訊,產生出我們想畫的圖片出來。
Thumbnail
試著玩一下 stable diffusion,一個 Ai 作畫的軟體~ 結果啥都畫不出來~ 哈哈哈!
Thumbnail
*合作聲明與警語: 本文係由國泰世華銀行邀稿。 證券服務係由國泰世華銀行辦理共同行銷證券經紀開戶業務,定期定額(股)服務由國泰綜合證券提供。   剛出社會的時候,很常在各種 Podcast 或 YouTube 甚至是在朋友間聊天,都會聽到各種市場動態、理財話題,像是:聯準會降息或是近期哪些科
Thumbnail
這個應用情境可能是,如果你有自己的產品想要以QRcode來行銷,而「文生圖」(txt2img)的結果又無法與你的實際想像契合時,那麼用你的實際產品做為基底的圖生圖(img2img)QRcode就是一個不錯的選項。
Thumbnail
這次的測試純粹是我個人好奇同一組繪圖prompt分別使用在真人風格與動漫風格的model下,會有什麼差別? 真人風格的model使用Basil mix,動漫風格的model使用anything-v4.5。Lora來源為C站的瑪奇瑪Lora。
Thumbnail
本教學使用Automatic 1111介面   AI繪圖風行至今,網上已有不少中文教學,包括教導如何訓練LoRA、LoCon等模型的文章,而訓練上述模型時,通常會經過一道「Preprocess Images」工序,中文稱為「圖片預處理」。
Thumbnail
stable diffusion 是一款AI繪圖軟體,你可以免費把stable diffusion算出來的圖免費拿來商用,但是像我的電腦因為顯卡太舊而無法快速運行,而浪費很多時間,你只要準備一個google帳號即可。
Thumbnail
AI 每天每週都在進步,我寫在 繪圖0能者的AI藝術入門手冊 的推薦軟體安裝,很快就推出新版了,所以,我把 Automatic1111 最新版本安裝方式寫在這裡,以便盡我所能為各位讀者更新。 建議使用 windows 桌機PC,具有 Nvidia GTX1660以上等級的獨立顯示卡,算圖會比較容易。
Thumbnail
去這邊點選開啟sd的webui-user.bat程式先會跟你說9009 把這個bat右鍵筆記本編輯會發現,set PYTHON=路徑是空的,那我們就去把後面的路徑補上改成下面這個 set PYTHON=D:\StableDiffusion\system\python\python.exe 接下來
Thumbnail
注意! 以下為不專業解釋~若有錯誤請指教。 使用 ai 產出圖片需要一個附檔名為 .ckpt 的模型訓練檔案~ai 會使用這個訓練檔案內的資訊,產生出我們想畫的圖片出來。
Thumbnail
試著玩一下 stable diffusion,一個 Ai 作畫的軟體~ 結果啥都畫不出來~ 哈哈哈!