最近在嘗試使用不同的AI生圖方式混合出圖的方式,採用A平台的優點,並用B平台後製的手法截長補短,創造出自己更想要的小說場景,效果不錯,現在以這張圖為例,來講一下我的製作步驟:
我是一個沒有圖就不會寫小說的寫作者,所以在許多小說的籌備階段,都會用AI產生大量的場景參考圖,替我發想一些場景。這個方法一直都執行得不錯,但當我的小說寫到某個程度,就會寫出一些沒有場景圖,但氛圍還不錯的段落。
這時我的需求就反過來了,我想要依照小說的場景、氛圍、動作量身打造特定圖片。
在這種情況下,除了使用3D Model擺出姿態之外,另一個方法就是使用不同AI生圖平台來製作概念圖片,然後將滿意的概念圖片用繪圖軟體後製拼接後,再交給擅長繪製特定人物的Stable Diffusion LoRA來轉繪成我需要的人物。
下面是我想要的場景:
一名高大的狼頭人與一名披著紅披風的黑長髮女子坐在荒山野嶺之中,前面是一團燃燒的營火,一人一狼隔著少許距離坐著,若有似無地看著對方。
這種人物互動,在Stable Diffusion上是很難直接輸出的,通常會出現很悲劇的場景。這時我改用OpenAI的DALL-E來出圖。對於中文敘述有著很好理解能力的ChatGPT很快就生出一個我很滿意的構圖:
拿到我滿意的構圖後,我就將這張圖片中央裁剪出我需要的部分,再使用Stable Diffusion的txt2img搭配ControlNet的canny,產生我要的類水彩風格:
這張初稿中,我已經將原本西式畫風的女性,另外用特定角色的LoRA轉化成長直髮的東方女子。
這張初稿接下來需要做的,是將狼頭人角色的鎧甲做上去。
我使用這張概念稿為基礎,試圖複製出足夠類似的鎧甲:
參考圖的人物是正面,所以我需要設想出相對應的背面圖樣。
我使用繪圖軟體的剪裁與圖層,在不足處(例如臀部的盔甲)就使用靈魂畫法,試圖拼貼出可能的圖樣:
然後針對盔甲部分,使出Stable Diffusion的部分重繪,重繪了十幾張不同樣式的盔甲後,選出數張部分滿意的成品,再次使用繪圖軟體摘取滿意的部件,重新繪製出一副盔甲:
圖A的肩甲
圖B的腰帶
圖C的手臂和鬃毛
圖D的背部皮甲
將這些零件湊合後得到接近完成版的半成品圖:
最後,將上一個步驟的合成鎧甲再丟入Stable Diffusion做低強度的inpaint後,就完成了所有步驟。
接下來是微調。
第一件事就是調大狼頭人的尾巴。在小說中,他的尾巴足足有半個狼頭人的身高,因此我使用繪圖軟體拉大變形他的尾巴。
第二件事是調整女主角的表情。在原圖中,她的嘴角是向下彎的。在我用繪圖軟體稍微向上拉伸五六個像素後,表情從嚴肅變成微笑。
人類辨識表情的敏感度真的非常厲害,一點點的彎曲就能得到完全不同的表情。
使用這個複數AI截長補短的手法,我也弄出了其他類似的小說插圖。
下面這張,就是使用DALL-E產生出一頭龍,以及一個戰鬥的金髮少女的圖案後,利用繪圖軟體接合在一起,之後使用Stable Diffuion整合統一風格的成果:
簡單說,就是利用某些AI特別能理解多人構圖、作者熟悉的語言等優勢產生初稿,然後使用其他AI能產生特定角色、特定畫風的優點,配上繪圖軟體接力編輯,製作出作者需要的視覺概念圖。
而這個方法也替我客製出很多小說中的場景,對此非常感恩!
祝大家AI生圖愉快!