AI繪圖 | Stable Diffusion web UI x ControlNet

閱讀時間約 4 分鐘
本文章感謝 sd-webui-controlnet 作者Mikubill協助幫忙&指導
S1.至 https://github.com/Mikubill/sd-webui-controlnet 了解安裝方式 並安裝 python 3.10.6
S3.下載後 點擊 webui.bat
進入目錄
先執行
virtualenv venv
.\venv\Scripts\activate.bat
(PowerShell模式則使用 .\venv\Scripts\activate.ps1 )
進到虛擬機器後再執行 
webui.bat
若無法順利安裝 可參考 環境安裝方式 AI 動漫產生器
pip install virtualenv
pip install omegaconf
GPU的VRAM只有4GB甚至更低,對Stable Diffusion資料夾的webui-user.bat按右鍵,以記事本開啟,加入 set COMMANDLINE_ARGS="--medvram"
set COMMANDLINE_ARGS=--medvram --disable-safe-unpickle --opt-split-attention
RAM小於8GB 加上--disable-safe-unpickle --opt-split-attention
S4.下載 model 至 stable-diffusion-v-1-4-original下載model 並將 ckpt檔案 放至 models/Stable-diffusion 目錄下
完成後如下圖
S5.來到 Extensions選項,使用 Install from URL ,並將 https://github.com/Mikubill/sd-webui-controlnet.git 連接 貼至欄位內後
點擊 Install
S6.來到 Installed 確認並點擊 Apply and restart UI
S6.至https://huggingface.co/lllyasviel/ControlNet/tree/main/models
下載模型
control_sd15_canny.pth(草稿邊緣偵測)
control_sd15_openpose.pth(提取圖中人物骨架)
或者至
ControlNet-modules-safetensors
下載control_openpose-fp16.safetensors
下載後放至
stable-diffusion-webui\extensions\sd-webui-controlnet\models
然後再下載
https://huggingface.co/lllyasviel/ControlNet/resolve/main/annotator/ckpts/body_pose_model.pth

https://huggingface.co/lllyasviel/ControlNet/resolve/main/annotator/ckpts/hand_pose_model.pth
放至
stable-diffusion-webui-master\extensions\sd-webui-controlnet\annotator\openpose
S7.重新啟動 Stable Diffusion web UI
S8.設定骨架
pip install pyre-extensions==0.0.23
pip install -i https://test.pypi.org/simple/ formers==0.0.15.dev376
S10.升級 gradio
pip install opencv-python
pip install gradio==3.16.2
為什麼會看到廣告
avatar-img
40會員
130內容數
獨立遊戲開發紀錄
留言0
查看全部
avatar-img
發表第一個留言支持創作者!
吳佳鑫的沙龍 的其他內容
進入美術的設計階段,主線遊戲開發決定採用3D建模 因此拿出了 Blender 作主要的3D工具 所以...一切重頭學習唄 XD 紀錄一下 最基本的甜甜圈製作過程 所需要用到的指令快捷鍵 基礎快捷鍵-介面操作 G-移動 R-旋轉 S-縮放 ~-叫出投影視角選項 shift+滾輪 - 移動視窗 shif
目前進展順利,完成了行走、對話劇情、背包、道具 簡易的2.5D遊戲功能逐漸成形 接下來就是進入最費時的打磨階段 要開始把場景、人物、NPC還有關卡設計、音樂、音效、動畫等等的元素 慢慢加進來,形成一個完整的遊戲內容了...
昨日教學生spine,今日趕緊回主線開發,把NPC跟對話系統裝上囉~ 接下來就要搞背包系統,一步一步慢慢推進~
紀錄一下,簡單的拆圖後到Spine 架設骨架、調動作
進入第十天,雖然最近因為教書又延遲了進度 不過,近日把劇本的事搞定了 總算是有劇情囉~(撒花 也因為如此,所以將原訂計畫採用2D製作 改成2.5D表現 進入3D的領域 完成了基本的人物行走功能 接下來就是陸續把功能做起來 加油囉~ 看看我是會先餓死 還是遊戲會先出來 ^_____^
神說:「要有光。」就有了光。 神看光是好的,就把光暗分開了。創世記 1:3 今日進入主線開發,首先處理時間系統 想到時間系統,就把遊戲世界的晝夜做出 因此,光影的變化就是第一個要實現的項目 時間的設定就先以薩爾達傳說曠野之息 現實世界一秒等於遊戲時間一分鐘 這樣搞囉~ 光影的設計,則以Univers
進入美術的設計階段,主線遊戲開發決定採用3D建模 因此拿出了 Blender 作主要的3D工具 所以...一切重頭學習唄 XD 紀錄一下 最基本的甜甜圈製作過程 所需要用到的指令快捷鍵 基礎快捷鍵-介面操作 G-移動 R-旋轉 S-縮放 ~-叫出投影視角選項 shift+滾輪 - 移動視窗 shif
目前進展順利,完成了行走、對話劇情、背包、道具 簡易的2.5D遊戲功能逐漸成形 接下來就是進入最費時的打磨階段 要開始把場景、人物、NPC還有關卡設計、音樂、音效、動畫等等的元素 慢慢加進來,形成一個完整的遊戲內容了...
昨日教學生spine,今日趕緊回主線開發,把NPC跟對話系統裝上囉~ 接下來就要搞背包系統,一步一步慢慢推進~
紀錄一下,簡單的拆圖後到Spine 架設骨架、調動作
進入第十天,雖然最近因為教書又延遲了進度 不過,近日把劇本的事搞定了 總算是有劇情囉~(撒花 也因為如此,所以將原訂計畫採用2D製作 改成2.5D表現 進入3D的領域 完成了基本的人物行走功能 接下來就是陸續把功能做起來 加油囉~ 看看我是會先餓死 還是遊戲會先出來 ^_____^
神說:「要有光。」就有了光。 神看光是好的,就把光暗分開了。創世記 1:3 今日進入主線開發,首先處理時間系統 想到時間系統,就把遊戲世界的晝夜做出 因此,光影的變化就是第一個要實現的項目 時間的設定就先以薩爾達傳說曠野之息 現實世界一秒等於遊戲時間一分鐘 這樣搞囉~ 光影的設計,則以Univers
你可能也想看
Google News 追蹤
Thumbnail
這個秋,Chill 嗨嗨!穿搭美美去賞楓,裝備款款去露營⋯⋯你的秋天怎麼過?秋日 To Do List 等你分享! 秋季全站徵文,我們準備了五個創作主題,參賽還有機會獲得「火烤兩用鍋」,一起來看看如何參加吧~
Thumbnail
11/20日NVDA即將公布最新一期的財報, 今天Sell Side的分析師, 開始調高目標價, 市場的股價也開始反應, 未來一週NVDA將重新回到美股市場的焦點, 今天我們要分析NVDA Sell Side怎麼看待這次NVDA的財報預測, 以及實際上Buy Side的倉位及操作, 從
Thumbnail
Hi 大家好,我是Ethan😊 相近大家都知道保濕是皮膚保養中最基本,也是最重要的一步。無論是在畫室裡長時間對著畫布,還是在旅途中面對各種氣候變化,保持皮膚的水分平衡對我來說至關重要。保濕化妝水不僅能迅速為皮膚補水,還能提升後續保養品的吸收效率。 曾經,我的保養程序簡單到只包括清潔和隨意上乳液
Thumbnail
用Canva「Text to image」製作出帥哥微崩圖,再用Unidream「圖生圖」上傳圖片並輸入文字指示,男生竟然變女生?!修改後,男生能變男生了,細部崩壞無法解決?!咱麼辦呢?「凡事轉個彎,跳脫框架,能創造意想不到的結果」。
Thumbnail
先用Canva「Text to image」製作出心動的圖片,手部及側臉微崩,再用Unidream「圖生圖」上傳微崩圖並輸入文字指示,男生竟然變女生?!「魔法工作室」功能,付費會員才能使用,小蝦意外間,發現到好康福利!免費帳號能試用「Text to video」、「Text to image」!
Thumbnail
結合不同AI軟體,無論「文本敘述生圖」、「以圖繪圖」、「AI局部改圖」,多多嘗試,才能得到更好的結果,玩得開心,結果自然愉快。 先用Canva「Text to image」勾勒出人體崩壞圖,它畫面構圖仍是好的,再用Unidream「文本描述生圖」上傳參考圖並輸入文字指示,立馬正常許多
Thumbnail
AI 繪圖提詞咒語(prompts)詠唱,如何呈現/表現一張圖像的風格,同時,還能夠學英文!
Thumbnail
AI 繪圖提詞咒語(prompts)詠唱,如何形容/描述一個人物的耳朵,同時,還能夠學英文!
Thumbnail
剛開始使用 MidJourney 的新手,需要了解如何輸入 Prompt (製圖指令)才能掌控繪圖品質。對於一個剛開始使用 MidJourney 的新手,應該如何學習呢?這篇文章會分享MidJourney 中你需要掌握 5 個重要製圖元素:關鍵字、圖片視角組成、燈光、參數、算圖模型。
Thumbnail
手機版必須下載APP,電腦版可直接以網頁操作。本文簡單說明使用步驟。
Thumbnail
發現Midjourney Bot只需要註冊Discord就可以馬上試用,於是就開始了我的AI繪圖體驗~。這裡記錄了我試用的完整過程及成果圖,也包含各種失敗的經驗,像是產出違和感太強烈的嚇人圖、不小心用了禁詞、選了AI做不到的內容,所以還有整理了推薦和不推薦的關鍵字,希望對大家與AI玩耍的時候有幫助。
Thumbnail
人工智慧取代畫師的時代來了!AI 繪圖平台 Disco Diffusion、Midjourney、DALL·E 2 的使用方法及心得 寫這篇文章,是因為明明現在許多AI自動生成圖片的平台 都不太需要大家寫程式了,但是卻好像沒什麼人幫大家整理 因為之後想跟更多人一起玩這種新科技,所以先來整理一下,未來
Thumbnail
這個秋,Chill 嗨嗨!穿搭美美去賞楓,裝備款款去露營⋯⋯你的秋天怎麼過?秋日 To Do List 等你分享! 秋季全站徵文,我們準備了五個創作主題,參賽還有機會獲得「火烤兩用鍋」,一起來看看如何參加吧~
Thumbnail
11/20日NVDA即將公布最新一期的財報, 今天Sell Side的分析師, 開始調高目標價, 市場的股價也開始反應, 未來一週NVDA將重新回到美股市場的焦點, 今天我們要分析NVDA Sell Side怎麼看待這次NVDA的財報預測, 以及實際上Buy Side的倉位及操作, 從
Thumbnail
Hi 大家好,我是Ethan😊 相近大家都知道保濕是皮膚保養中最基本,也是最重要的一步。無論是在畫室裡長時間對著畫布,還是在旅途中面對各種氣候變化,保持皮膚的水分平衡對我來說至關重要。保濕化妝水不僅能迅速為皮膚補水,還能提升後續保養品的吸收效率。 曾經,我的保養程序簡單到只包括清潔和隨意上乳液
Thumbnail
用Canva「Text to image」製作出帥哥微崩圖,再用Unidream「圖生圖」上傳圖片並輸入文字指示,男生竟然變女生?!修改後,男生能變男生了,細部崩壞無法解決?!咱麼辦呢?「凡事轉個彎,跳脫框架,能創造意想不到的結果」。
Thumbnail
先用Canva「Text to image」製作出心動的圖片,手部及側臉微崩,再用Unidream「圖生圖」上傳微崩圖並輸入文字指示,男生竟然變女生?!「魔法工作室」功能,付費會員才能使用,小蝦意外間,發現到好康福利!免費帳號能試用「Text to video」、「Text to image」!
Thumbnail
結合不同AI軟體,無論「文本敘述生圖」、「以圖繪圖」、「AI局部改圖」,多多嘗試,才能得到更好的結果,玩得開心,結果自然愉快。 先用Canva「Text to image」勾勒出人體崩壞圖,它畫面構圖仍是好的,再用Unidream「文本描述生圖」上傳參考圖並輸入文字指示,立馬正常許多
Thumbnail
AI 繪圖提詞咒語(prompts)詠唱,如何呈現/表現一張圖像的風格,同時,還能夠學英文!
Thumbnail
AI 繪圖提詞咒語(prompts)詠唱,如何形容/描述一個人物的耳朵,同時,還能夠學英文!
Thumbnail
剛開始使用 MidJourney 的新手,需要了解如何輸入 Prompt (製圖指令)才能掌控繪圖品質。對於一個剛開始使用 MidJourney 的新手,應該如何學習呢?這篇文章會分享MidJourney 中你需要掌握 5 個重要製圖元素:關鍵字、圖片視角組成、燈光、參數、算圖模型。
Thumbnail
手機版必須下載APP,電腦版可直接以網頁操作。本文簡單說明使用步驟。
Thumbnail
發現Midjourney Bot只需要註冊Discord就可以馬上試用,於是就開始了我的AI繪圖體驗~。這裡記錄了我試用的完整過程及成果圖,也包含各種失敗的經驗,像是產出違和感太強烈的嚇人圖、不小心用了禁詞、選了AI做不到的內容,所以還有整理了推薦和不推薦的關鍵字,希望對大家與AI玩耍的時候有幫助。
Thumbnail
人工智慧取代畫師的時代來了!AI 繪圖平台 Disco Diffusion、Midjourney、DALL·E 2 的使用方法及心得 寫這篇文章,是因為明明現在許多AI自動生成圖片的平台 都不太需要大家寫程式了,但是卻好像沒什麼人幫大家整理 因為之後想跟更多人一起玩這種新科技,所以先來整理一下,未來