如何用 Stable Diffusion + ControlNet 向外擴展圖片？| Outpainting
更新於 2023/07/10閱讀時間約 5 分鐘
修圖的時候，有沒有遇過「如果當初再左邊一點就好了！」「如果當初廣角一點就好了！」以前只能想辦法手工 P 出來，但靠 Stable Diffusion + ControlNet 新推出的 Inpaint 模型，除了可以做圖片內修補外，也能往外擴展補完圖片 (outpaintng)！實在太強了！趕快來看看怎麼作吧！
目錄
- 1 準備素材
1.1 下載 ControlNet Inpaint Model
1.2 準備實驗圖片
1.3 使用 Interrogate 推理提示詞 - 2 使用 ControlNet Inpaint 來 Outpainting
2.1 基本 txt2img 設定
2.2 ControlNet 設定
2.3 開始算圖 - 3 用 img2img 修補 outpainting 結果
3.1 基本 img2img 設定
3.2 ControlNet 設定
3.3 開始算圖 - 4 結論
準備素材
下載 ControlNet Inpaint Model
此作法需要用到 ControlNet 與 ControlNet Inpaint Model，還沒安裝 ControlNet 的話，可以到 Extension Tab ，在 Install from URL 輸入 https://github.com/Mikubill/sd-webui-controlnet.git 安裝 。詳細安裝步驟請參考 github 的 installation 章節。
ControlNet Inpaint Model 請到 HuggingFace 下載 control_v11p_sd15_inpaint.pth 和 control_v11p_sd15_inpaint.yaml 後，放入 stable-diffusion-webui\extensions\sd-webui-controlnet 資料夾內。
回到 StableDiffusion WebUI，重啟一下，如果有看到 ControlNet v1.1 區塊以及 Inpaint Model 就代表安裝完成！
註：若先前已經安裝過 ControlNet，務必更新到 ControlNet v1.1 以上才有 inpaint 功能！
準備實驗圖片
為了「對照」 Stable Diffusion 向外擴展的能力，我刻意使用完整的圖片作裁切去除兩側，留下中央部分給 AI 去補完，最後再與原圖做一番比較
使用 Interrogate 推理提示詞
為了讓出圖能夠更完善，可以使用 Stable Diffusion img2img tab 裡內建的 Interrogate CLIP 或 Interrogate DeepBooru 從圖面推理出提詞，再依情況人工修改，速度比較快。詳細步驟如下：
- 將圖片拖入 img2img tab 的 source 區塊
- 點擊右上方橘色 Interrogate CLIP 按鈕 (DeepBooru 也可以，會以關鍵字的方式產出）
- 等待一小段計算時間，推理出的提示詞會出現在 Positive Prompt 輸入框中
- 複製備用
使用 ControlNet Inpaint 來 Outpainting
基本 txt2img 設定
一切準備妥當，回到 Stable Diffusion txt2img tab 頁面開始實作：
- 貼上剛剛的 Prompt，並適當增加 Negative Prompt
- Sampling Method: 選擇 Euler a，因為算圖速度比較快，用來初步構圖
- Sampling Steps: 先用預設 20
- Width / Hight: 分別設定為 784, 512，數值可自由選擇，但為了讓他能夠作 outpainting，比例一定要和原圖不一樣！以範例來說，原圖是直幅，要讓他 outpainting 成橫幅，寬一定要設定比高來的多。
- 其他保留預設即可
ControlNet 設定
接下來重點是 ControlNet 的設定：
- 勾選 enable
- 將圖片拖到 source 區
- Preprocessor: 選擇 inpaint_only
- Model: 選擇 control_v11p_sd15_inpaint
- Resize Mode: 選擇 Resize and Fill，很重要！因為要讓他 fill 空白的部分，選錯就不會 outpainting！
延伸閱讀
為什麼會看到廣告
4會員
12內容數
留言0
查看全部
你可能也想看
Google News 追蹤
*合作聲明與警語：
本文係由國泰世華銀行邀稿。
證券服務係由國泰世華銀行辦理共同行銷證券經紀開戶業務，定期定額(股)服務由國泰綜合證券提供。
剛出社會的時候，很常在各種 Podcast 或 YouTube 甚至是在朋友間聊天，都會聽到各種市場動態、理財話題，像是：聯準會降息或是近期哪些科
不知道如何下筆嗎？用自問自答的方式收集素材吧！
在《九宮格寫作術》一書中，作者推薦用「自問自答」的方式，收集寫文章的材料。
我發現如何用 Notion 這個軟體，更有效的實現九宮格寫作的精神；
就是用 Toggle list 的方式寫下問題，這樣就可以方便收合，讓大綱更清晰。
在我們上一篇文章中，提到了生成AI Art QR Code的方法。今天這一篇中我們要實戰另一種生成AI QR Code的方法。上一篇的方法需要由經由 X/Y/Z測試去獲得最佳的參數，且套用不同的Model/Lora都需要去找最佳的甜蜜點，這樣難免比較累一點，今天我會介紹一個方式，是相對比較穩定的做法
警廣的周三下午「下班有事嗎」新單元「書適過生活」單元內，以說書人的身分分享《OKR最重要的一堂課》。 身為本單元打頭陣的第一個素人說書人，錄音後的幾個心得，分享給其他說書人們參考。分別有「認知前提」、「事前、當下、事後」等幾個需要留意的面向，大家可以參考！
在這篇示範裡面，我將教你如何利用AI繪圖工具Stable Diffusion產生出自己的一整套塔羅牌排組，而且這整套牌組還是套用上自己Training的LORA的，也就是塔羅牌的主角都可以是你或是你身邊的人(或是你的偶像明星)，一旦掌握訣竅，用這篇的方法一天以內就可以完成這個工作。
資訊設計百百種，光是「捷運各站進出量」的主題就可以列舉許多案例。PTT 的文字整理可以總覽各站的排名和數據，還能比較漲跌趨勢。泡泡地圖則能夠把數據圖形化和空間化，讓讀者更直觀理解各站之間的差異和相對位置。要設計出好看、好懂、看了會喜歡的圖表，隱含許多設計的學問，需要具被資料處理和美術設計的能力。
有時候大家會在網路上看到各種網紅、置入性行銷。今天，いくえ先生要教大家的句子，不是這種大肆用力的推薦，算是我們自己市井小民想要做小小推薦時，可以用的小句子～很實用喔～大家來看看吧～～
如何才可以利用降頭令喜歡的對象主動找你?
大家好！我是玄燊師傅，很多人其實有自己喜歡的對象，但往往只是單戀，他有嘗試過去追求這段愛情，但結果往往是以失敗告終。
然後，他們會嘗試用一些偏方去獲得這段感情…
在玄學上，達到這種目的其實有很多不同的方法，這條片主要會教你如何用降頭這方法去達到這
*合作聲明與警語：
本文係由國泰世華銀行邀稿。
證券服務係由國泰世華銀行辦理共同行銷證券經紀開戶業務，定期定額(股)服務由國泰綜合證券提供。
剛出社會的時候，很常在各種 Podcast 或 YouTube 甚至是在朋友間聊天，都會聽到各種市場動態、理財話題，像是：聯準會降息或是近期哪些科
不知道如何下筆嗎？用自問自答的方式收集素材吧！
在《九宮格寫作術》一書中，作者推薦用「自問自答」的方式，收集寫文章的材料。
我發現如何用 Notion 這個軟體，更有效的實現九宮格寫作的精神；
就是用 Toggle list 的方式寫下問題，這樣就可以方便收合，讓大綱更清晰。
在我們上一篇文章中，提到了生成AI Art QR Code的方法。今天這一篇中我們要實戰另一種生成AI QR Code的方法。上一篇的方法需要由經由 X/Y/Z測試去獲得最佳的參數，且套用不同的Model/Lora都需要去找最佳的甜蜜點，這樣難免比較累一點，今天我會介紹一個方式，是相對比較穩定的做法
警廣的周三下午「下班有事嗎」新單元「書適過生活」單元內，以說書人的身分分享《OKR最重要的一堂課》。 身為本單元打頭陣的第一個素人說書人，錄音後的幾個心得，分享給其他說書人們參考。分別有「認知前提」、「事前、當下、事後」等幾個需要留意的面向，大家可以參考！
在這篇示範裡面，我將教你如何利用AI繪圖工具Stable Diffusion產生出自己的一整套塔羅牌排組，而且這整套牌組還是套用上自己Training的LORA的，也就是塔羅牌的主角都可以是你或是你身邊的人(或是你的偶像明星)，一旦掌握訣竅，用這篇的方法一天以內就可以完成這個工作。
資訊設計百百種，光是「捷運各站進出量」的主題就可以列舉許多案例。PTT 的文字整理可以總覽各站的排名和數據，還能比較漲跌趨勢。泡泡地圖則能夠把數據圖形化和空間化，讓讀者更直觀理解各站之間的差異和相對位置。要設計出好看、好懂、看了會喜歡的圖表，隱含許多設計的學問，需要具被資料處理和美術設計的能力。
有時候大家會在網路上看到各種網紅、置入性行銷。今天，いくえ先生要教大家的句子，不是這種大肆用力的推薦，算是我們自己市井小民想要做小小推薦時，可以用的小句子～很實用喔～大家來看看吧～～
如何才可以利用降頭令喜歡的對象主動找你?
大家好！我是玄燊師傅，很多人其實有自己喜歡的對象，但往往只是單戀，他有嘗試過去追求這段愛情，但結果往往是以失敗告終。
然後，他們會嘗試用一些偏方去獲得這段感情…
在玄學上，達到這種目的其實有很多不同的方法，這條片主要會教你如何用降頭這方法去達到這