Stable Diffusion練習,哈娜與修的談判

更新於 2023/07/18閱讀時間約 5 分鐘
完成圖
三十枚銀幣!等於一百二十四個整日又一加四分之一禮拜鐘的打工薪資!
一想到出城做個十幾天的短期任務就可以賺到九倍於打工的薪水,她心中整個飛揚了起來。

前言

本篇要來分享一下如何用之前學到的技巧來製作有透視關係的多人圖。
這張圖用於我自己的小說 哈娜與修的談判 -- Stable Diffusion繪製 的概念插畫,所以對於角色的表情、姿勢與攝影角度有一定的要求,不是光靠提示詞就能輕鬆生成,最省時間的方法就是使用人偶生圖法來產生姿勢固定的圖。
這張圖要使用人偶網站產出特定的姿勢,然後使用人偶生圖法將人偶轉換成想要的角色,之後再使用Inpaint Sketch與紙娃娃穿衣法等綜合方法將人物的衣服調整成角色固定的衣著,最後使用光影調整技法將陰影與對比調整出來。
我在這張圖花上的時間,確定了人偶生圖法是一個可行的技巧,以及體驗到這個技術的局限與特色。

流程

首先,我使用 Stable Diffusion進階 -- 人偶生圖(一) 提到的方法,從PoseMy.Art擺放人偶,直到姿勢與角度都符合我的需求為止:
PoseMy.Art產生的原始圖
PoseMy.Art產生的openpose圖
這時我發現,在一般的情況下,從PoseMy.Art產生的openpose圖,比ControlNet偵測人偶圖產生openpose要更精準,因為人偶圖可能缺失某些肢體,例如膝蓋或手肘,這時ControlNet會無法產生前臂與小腿的位置,所以這種情況下用網站生產的openpose更全面。
依照人偶生圖教學文章的步驟,我首先將其中一個人偶用Inpaint轉換成真實角色:
先將第一個角色生成,即使沒有很像也可以
至於為何不把兩個角色都一起生成,是因為這樣兩個角色同時都讓人滿意的機率很低,倒不如一個生成滿意之後再應付下一個,步步為營比較省時間。
由於髮型不是我想要的,因此我這次使用 Stable Diffusion基礎 -- 塗鴉(Sketch)
提到的Inpaint Sketch來改造髮型:
Inpaint Sketch改造髮型
順帶一提,之前都小看了Inpaint Sketch的威力,現在才發現它真是好用,很多inpaint半天生不出來的東西,用它就搞定了。
將第一個角色搞定之後,接下來用Inpaint轉換第二個角色:
第二個角色
由於她在圖中佔用的面積過小,所以很難畫出完全符合提示詞與LoRA敘述的樣子。但是這可以在之後經由放大並Inpaint臉部來改善,所以現階段要注意的是身體的姿勢與大概的特徵是否吻合原先的需求。
由於現在女角的衣服完全不是我要的但是臉部與姿勢符合我的需求,所以我需要用 Stable Diffusion進階 -- 紙娃娃穿衣法 來替換她的全身衣物:
拼貼出的衣服
經過Loopback慢慢烘焙之後,再加上繪圖軟體修改一些不符合衣物特徵的部分,我能得到一個滿意的固定角色配上固定衣服:
除了手之外,一切都okay
接下來,為了配合劇情,這兩個人的手是藏在一個毛巾之下,完美避開握手這種對Stable Diffusion來說無解的難題。我再次使用Inpaint Sketch畫出一個毛巾的大概圖樣:
看起來像毛毛蟲爬在香蕉皮上的毛巾
而AI再次不負眾望,幫我把這個幼兒園等級的繪畫轉變成了蓋住兩人手臂的毛巾:
讚嘆AI,幫我把香蕉皮轉換成毛巾!
接著,我使用繪圖軟體將整個黑色區域塗滿不同程度的棕色,模擬木製家具與牆壁的質感,然後跑了大約100張的圖,選出最符合我小說情境的室內圖:
AI連桌面倒影都繪製了
接下來,我將圖輸入繪圖軟體,使用半透明遮罩指定了光源,將整張圖的陰影與對比改變,詳細過程已在 Stable Diffusion進階 -- 漸進式光影(二) 描述,而完成圖則是:
改造完光影的完成圖
將這張圖放大四倍之後,就是我用在小說片段的插畫圖了。

結論

從製作這張圖學到的技巧,讓我覺得依靠Stable Diffusion加上ControlNet配合上一些繪圖軟體的操作,是可以做出能用於插畫概念圖,漫畫電影概念分鏡稿等用於與繪師溝通的實際圖像,讓整個創意生產流程少掉許多不必要的來回溝通與浪費。
祝大家AI算圖愉快!
即將進入廣告,捲動後可繼續閱讀
為什麼會看到廣告
avatar-img
21.6K會員
366內容數
寫奇幻小說,畫圖,心得,各式各樣作品的故鄉。
留言0
查看全部
avatar-img
發表第一個留言支持創作者!
本篇要來分享一個很簡單但是效果非常有趣的提示詞風格,就是上圖所見的公仔風。
本篇要來分享一下製作 (漫畫)姊妹會秘儀時用到的各種AI生成技巧。 很多時候,為了將心中一個想法實現,必須用上許多自己原先不會的技巧,雖然過程是痛苦的、掙扎的,但是這樣一點一滴邁向終點,當到達時,就會發現收穫的不只是成果,還有一路上學到的新技能。
這篇要來示範將幾個AI算圖技巧綜合起來之後,如何得到「草地唸書」的完成圖。
這篇主要來講解一下Inpaint的作用,跟這個功能如何幫助我們一點一點改畫一個原始概念,直到整幅畫符合需求。 這幅作品的概念是要藉由人類與機器人的互動,來展現人類在機械與AI支配的未來的景況。
這篇要來做一個算是簡單,但是不算無腦的練習。一日,我想要換掉在方格子與Instgram上的大頭貼,換成一個更貼近自己喜歡的主題的圓形大頭貼。
像公主抱這種姿勢, 對於Stable Diffusion來說其實異常困難。最主要是因為這個姿勢牽涉兩個人,肢體是互相重疊在一起,而且很多地方都會露出手與手指。更別提通常這是男抱女,兩種不同性別的人物的貼身互動。 於是SD常常會算出惡夢般的成品......
本篇要來分享一個很簡單但是效果非常有趣的提示詞風格,就是上圖所見的公仔風。
本篇要來分享一下製作 (漫畫)姊妹會秘儀時用到的各種AI生成技巧。 很多時候,為了將心中一個想法實現,必須用上許多自己原先不會的技巧,雖然過程是痛苦的、掙扎的,但是這樣一點一滴邁向終點,當到達時,就會發現收穫的不只是成果,還有一路上學到的新技能。
這篇要來示範將幾個AI算圖技巧綜合起來之後,如何得到「草地唸書」的完成圖。
這篇主要來講解一下Inpaint的作用,跟這個功能如何幫助我們一點一點改畫一個原始概念,直到整幅畫符合需求。 這幅作品的概念是要藉由人類與機器人的互動,來展現人類在機械與AI支配的未來的景況。
這篇要來做一個算是簡單,但是不算無腦的練習。一日,我想要換掉在方格子與Instgram上的大頭貼,換成一個更貼近自己喜歡的主題的圓形大頭貼。
像公主抱這種姿勢, 對於Stable Diffusion來說其實異常困難。最主要是因為這個姿勢牽涉兩個人,肢體是互相重疊在一起,而且很多地方都會露出手與手指。更別提通常這是男抱女,兩種不同性別的人物的貼身互動。 於是SD常常會算出惡夢般的成品......
你可能也想看
Google News 追蹤
Thumbnail
*合作聲明與警語: 本文係由國泰世華銀行邀稿。 證券服務係由國泰世華銀行辦理共同行銷證券經紀開戶業務,定期定額(股)服務由國泰綜合證券提供。   剛出社會的時候,很常在各種 Podcast 或 YouTube 甚至是在朋友間聊天,都會聽到各種市場動態、理財話題,像是:聯準會降息或是近期哪些科
Thumbnail
這個應用情境可能是,如果你有自己的產品想要以QRcode來行銷,而「文生圖」(txt2img)的結果又無法與你的實際想像契合時,那麼用你的實際產品做為基底的圖生圖(img2img)QRcode就是一個不錯的選項。
Thumbnail
本文探討了反向詞(Negative Embedding)的概念,並介紹了在 Stable Diffusion WebUI 中使用的幾種模型,包括 EasyNegative、bad_prompt_version2、bad-hands-5 和 Deep Negative V1.x。這些模型的主要目的是在
Thumbnail
這次的測試純粹是我個人好奇同一組繪圖prompt分別使用在真人風格與動漫風格的model下,會有什麼差別? 真人風格的model使用Basil mix,動漫風格的model使用anything-v4.5。Lora來源為C站的瑪奇瑪Lora。
Thumbnail
本教學使用Automatic 1111介面   AI繪圖風行至今,網上已有不少中文教學,包括教導如何訓練LoRA、LoCon等模型的文章,而訓練上述模型時,通常會經過一道「Preprocess Images」工序,中文稱為「圖片預處理」。
Thumbnail
stable diffusion 是一款AI繪圖軟體,你可以免費把stable diffusion算出來的圖免費拿來商用,但是像我的電腦因為顯卡太舊而無法快速運行,而浪費很多時間,你只要準備一個google帳號即可。
Thumbnail
AI 每天每週都在進步,我寫在 繪圖0能者的AI藝術入門手冊 的推薦軟體安裝,很快就推出新版了,所以,我把 Automatic1111 最新版本安裝方式寫在這裡,以便盡我所能為各位讀者更新。 建議使用 windows 桌機PC,具有 Nvidia GTX1660以上等級的獨立顯示卡,算圖會比較容易。
Thumbnail
去這邊點選開啟sd的webui-user.bat程式先會跟你說9009 把這個bat右鍵筆記本編輯會發現,set PYTHON=路徑是空的,那我們就去把後面的路徑補上改成下面這個 set PYTHON=D:\StableDiffusion\system\python\python.exe 接下來
Thumbnail
  2023/Apr/8 補充更新 - 想訓練AI模型的人,建議正常安裝Python和Git,理由如下:
Thumbnail
注意! 以下為不專業解釋~若有錯誤請指教。 使用 ai 產出圖片需要一個附檔名為 .ckpt 的模型訓練檔案~ai 會使用這個訓練檔案內的資訊,產生出我們想畫的圖片出來。
Thumbnail
試著玩一下 stable diffusion,一個 Ai 作畫的軟體~ 結果啥都畫不出來~ 哈哈哈!
Thumbnail
*合作聲明與警語: 本文係由國泰世華銀行邀稿。 證券服務係由國泰世華銀行辦理共同行銷證券經紀開戶業務,定期定額(股)服務由國泰綜合證券提供。   剛出社會的時候,很常在各種 Podcast 或 YouTube 甚至是在朋友間聊天,都會聽到各種市場動態、理財話題,像是:聯準會降息或是近期哪些科
Thumbnail
這個應用情境可能是,如果你有自己的產品想要以QRcode來行銷,而「文生圖」(txt2img)的結果又無法與你的實際想像契合時,那麼用你的實際產品做為基底的圖生圖(img2img)QRcode就是一個不錯的選項。
Thumbnail
本文探討了反向詞(Negative Embedding)的概念,並介紹了在 Stable Diffusion WebUI 中使用的幾種模型,包括 EasyNegative、bad_prompt_version2、bad-hands-5 和 Deep Negative V1.x。這些模型的主要目的是在
Thumbnail
這次的測試純粹是我個人好奇同一組繪圖prompt分別使用在真人風格與動漫風格的model下,會有什麼差別? 真人風格的model使用Basil mix,動漫風格的model使用anything-v4.5。Lora來源為C站的瑪奇瑪Lora。
Thumbnail
本教學使用Automatic 1111介面   AI繪圖風行至今,網上已有不少中文教學,包括教導如何訓練LoRA、LoCon等模型的文章,而訓練上述模型時,通常會經過一道「Preprocess Images」工序,中文稱為「圖片預處理」。
Thumbnail
stable diffusion 是一款AI繪圖軟體,你可以免費把stable diffusion算出來的圖免費拿來商用,但是像我的電腦因為顯卡太舊而無法快速運行,而浪費很多時間,你只要準備一個google帳號即可。
Thumbnail
AI 每天每週都在進步,我寫在 繪圖0能者的AI藝術入門手冊 的推薦軟體安裝,很快就推出新版了,所以,我把 Automatic1111 最新版本安裝方式寫在這裡,以便盡我所能為各位讀者更新。 建議使用 windows 桌機PC,具有 Nvidia GTX1660以上等級的獨立顯示卡,算圖會比較容易。
Thumbnail
去這邊點選開啟sd的webui-user.bat程式先會跟你說9009 把這個bat右鍵筆記本編輯會發現,set PYTHON=路徑是空的,那我們就去把後面的路徑補上改成下面這個 set PYTHON=D:\StableDiffusion\system\python\python.exe 接下來
Thumbnail
  2023/Apr/8 補充更新 - 想訓練AI模型的人,建議正常安裝Python和Git,理由如下:
Thumbnail
注意! 以下為不專業解釋~若有錯誤請指教。 使用 ai 產出圖片需要一個附檔名為 .ckpt 的模型訓練檔案~ai 會使用這個訓練檔案內的資訊,產生出我們想畫的圖片出來。
Thumbnail
試著玩一下 stable diffusion,一個 Ai 作畫的軟體~ 結果啥都畫不出來~ 哈哈哈!