AI繪圖 | Stable Diffusion web UI x ControlNet
更新於 2023/02/17閱讀時間約 4 分鐘
本文章感謝 sd-webui-controlnet 作者Mikubill協助幫忙&指導
S1.至 https://github.com/Mikubill/sd-webui-controlnet 了解安裝方式 並安裝 python 3.10.6 版
S2.下載 stable-diffusion-webui
S3.下載後 點擊 webui.bat
進入目錄
進入目錄
先執行virtualenv venv
.\venv\Scripts\activate.bat
(PowerShell模式則使用 .\venv\Scripts\activate.ps1 )進到虛擬機器後再執行
webui.bat
若無法順利安裝 可參考 環境安裝方式 AI 動漫產生器
pip install virtualenvpip install omegaconf
GPU的VRAM只有4GB甚至更低，對Stable Diffusion資料夾的webui-user.bat按右鍵，以記事本開啟，加入 set COMMANDLINE_ARGS="--medvram"
set COMMANDLINE_ARGS=--medvram --disable-safe-unpickle --opt-split-attention
RAM小於8GB 加上--disable-safe-unpickle --opt-split-attention
S4.下載 model 至 stable-diffusion-v-1-4-original下載model 並將 ckpt檔案 放至 models/Stable-diffusion 目錄下
完成後如下圖
完成後如下圖
S5.來到 Extensions選項，使用 Install from URL ，並將 https://github.com/Mikubill/sd-webui-controlnet.git 連接 貼至欄位內後
點擊 Install
點擊 Install
S6.來到 Installed 確認並點擊 Apply and restart UI
S6.至https://huggingface.co/lllyasviel/ControlNet/tree/main/models
下載模型
control_sd15_canny.pth（草稿邊緣偵測）
control_sd15_openpose.pth（提取圖中人物骨架）
或者至
ControlNet-modules-safetensors
下載control_openpose-fp16.safetensors
下載後放至
stable-diffusion-webui\extensions\sd-webui-controlnet\models
然後再下載
https://huggingface.co/lllyasviel/ControlNet/resolve/main/annotator/ckpts/body_pose_model.pth
https://huggingface.co/lllyasviel/ControlNet/resolve/main/annotator/ckpts/hand_pose_model.pth
放至
stable-diffusion-webui-master\extensions\sd-webui-controlnet\annotator\openpose
下載模型
control_sd15_canny.pth（草稿邊緣偵測）
control_sd15_openpose.pth（提取圖中人物骨架）
或者至
ControlNet-modules-safetensors
下載control_openpose-fp16.safetensors
下載後放至
stable-diffusion-webui\extensions\sd-webui-controlnet\models
然後再下載
https://huggingface.co/lllyasviel/ControlNet/resolve/main/annotator/ckpts/body_pose_model.pth
https://huggingface.co/lllyasviel/ControlNet/resolve/main/annotator/ckpts/hand_pose_model.pth
放至
stable-diffusion-webui-master\extensions\sd-webui-controlnet\annotator\openpose
S7.重新啟動 Stable Diffusion web UI
S8.設定骨架
pip install pyre-extensions==0.0.23
pip install -i https://test.pypi.org/simple/ formers==0.0.15.dev376
S10.升級 gradio
pip install opencv-python
pip install gradio==3.16.2
為什麼會看到廣告
留言0
查看全部
你可能也想看
Google News 追蹤
*合作聲明與警語：
本文係由國泰世華銀行邀稿。
證券服務係由國泰世華銀行辦理共同行銷證券經紀開戶業務，定期定額(股)服務由國泰綜合證券提供。
剛出社會的時候，很常在各種 Podcast 或 YouTube 甚至是在朋友間聊天，都會聽到各種市場動態、理財話題，像是：聯準會降息或是近期哪些科
用Canva「Text to image」製作出帥哥微崩圖，再用Unidream「圖生圖」上傳圖片並輸入文字指示，男生竟然變女生？！修改後，男生能變男生了，細部崩壞無法解決？！咱麼辦呢？「凡事轉個彎，跳脫框架，能創造意想不到的結果」。
先用Canva「Text to image」製作出心動的圖片，手部及側臉微崩，再用Unidream「圖生圖」上傳微崩圖並輸入文字指示，男生竟然變女生？！「魔法工作室」功能，付費會員才能使用，小蝦意外間，發現到好康福利！免費帳號能試用「Text to video」、「Text to image」！
結合不同AI軟體，無論「文本敘述生圖」、「以圖繪圖」、「AI局部改圖」，多多嘗試，才能得到更好的結果，玩得開心，結果自然愉快。
先用Canva「Text to image」勾勒出人體崩壞圖，它畫面構圖仍是好的，再用Unidream「文本描述生圖」上傳參考圖並輸入文字指示，立馬正常許多
AI 繪圖提詞咒語（prompts）詠唱，如何呈現／表現一張圖像的風格，同時，還能夠學英文！
AI 繪圖提詞咒語（prompts）詠唱，如何形容／描述一個人物的耳朵，同時，還能夠學英文！
剛開始使用 MidJourney 的新手，需要了解如何輸入 Prompt (製圖指令)才能掌控繪圖品質。對於一個剛開始使用 MidJourney 的新手，應該如何學習呢？這篇文章會分享MidJourney 中你需要掌握 5 個重要製圖元素：關鍵字、圖片視角組成、燈光、參數、算圖模型。
發現Midjourney Bot只需要註冊Discord就可以馬上試用，於是就開始了我的AI繪圖體驗~。這裡記錄了我試用的完整過程及成果圖，也包含各種失敗的經驗，像是產出違和感太強烈的嚇人圖、不小心用了禁詞、選了AI做不到的內容，所以還有整理了推薦和不推薦的關鍵字，希望對大家與AI玩耍的時候有幫助。
人工智慧取代畫師的時代來了！AI 繪圖平台 Disco Diffusion、Midjourney、DALL·E 2 的使用方法及心得
寫這篇文章，是因為明明現在許多AI自動生成圖片的平台
都不太需要大家寫程式了，但是卻好像沒什麼人幫大家整理
因為之後想跟更多人一起玩這種新科技，所以先來整理一下，未來
*合作聲明與警語：
本文係由國泰世華銀行邀稿。
證券服務係由國泰世華銀行辦理共同行銷證券經紀開戶業務，定期定額(股)服務由國泰綜合證券提供。
剛出社會的時候，很常在各種 Podcast 或 YouTube 甚至是在朋友間聊天，都會聽到各種市場動態、理財話題，像是：聯準會降息或是近期哪些科
用Canva「Text to image」製作出帥哥微崩圖，再用Unidream「圖生圖」上傳圖片並輸入文字指示，男生竟然變女生？！修改後，男生能變男生了，細部崩壞無法解決？！咱麼辦呢？「凡事轉個彎，跳脫框架，能創造意想不到的結果」。
先用Canva「Text to image」製作出心動的圖片，手部及側臉微崩，再用Unidream「圖生圖」上傳微崩圖並輸入文字指示，男生竟然變女生？！「魔法工作室」功能，付費會員才能使用，小蝦意外間，發現到好康福利！免費帳號能試用「Text to video」、「Text to image」！
結合不同AI軟體，無論「文本敘述生圖」、「以圖繪圖」、「AI局部改圖」，多多嘗試，才能得到更好的結果，玩得開心，結果自然愉快。
先用Canva「Text to image」勾勒出人體崩壞圖，它畫面構圖仍是好的，再用Unidream「文本描述生圖」上傳參考圖並輸入文字指示，立馬正常許多
AI 繪圖提詞咒語（prompts）詠唱，如何呈現／表現一張圖像的風格，同時，還能夠學英文！
AI 繪圖提詞咒語（prompts）詠唱，如何形容／描述一個人物的耳朵，同時，還能夠學英文！
剛開始使用 MidJourney 的新手，需要了解如何輸入 Prompt (製圖指令)才能掌控繪圖品質。對於一個剛開始使用 MidJourney 的新手，應該如何學習呢？這篇文章會分享MidJourney 中你需要掌握 5 個重要製圖元素：關鍵字、圖片視角組成、燈光、參數、算圖模型。
發現Midjourney Bot只需要註冊Discord就可以馬上試用，於是就開始了我的AI繪圖體驗~。這裡記錄了我試用的完整過程及成果圖，也包含各種失敗的經驗，像是產出違和感太強烈的嚇人圖、不小心用了禁詞、選了AI做不到的內容，所以還有整理了推薦和不推薦的關鍵字，希望對大家與AI玩耍的時候有幫助。
人工智慧取代畫師的時代來了！AI 繪圖平台 Disco Diffusion、Midjourney、DALL·E 2 的使用方法及心得
寫這篇文章，是因為明明現在許多AI自動生成圖片的平台
都不太需要大家寫程式了，但是卻好像沒什麼人幫大家整理
因為之後想跟更多人一起玩這種新科技，所以先來整理一下，未來