ComfyUI 研究 - 更換背景
這篇要運用自動遮罩、重繪、批次的技巧，幫同一個人物更換不同背景。
自動遮罩
自動遮罩採用Segment Anything這個節點組，載入圖片後可以依指定的提示詞自動產生遮罩圖像，這邊我要更換的是背景，所以先讓AI抓出人物後，再反轉遮罩範圍輸出，為了讓重繪圖像不要過於生硬，將遮罩進行了高斯模糊。
這個工作流使用的節點：
- Load Image
- SAMModelLoader (segment anything)
- GroundingDinoModelLoader (segment anything)
- GroundingDinoSAMSegment (segment anything)
- InvertMask (segment anything)
- Gaussian Blur Mask
- Mask To Image (mtb) < 方便檢視遮罩範圍
- Preview Image
做為核心流程的Segment Anything在安裝上可能會遭遇到一些困難，只要照官方流程操作並手動下載需要的模型就可以解決。
在這個工作流中產生的遮罩可以透過調整threshold數值去調整範圍，像範例圖片的人物身體部分有些空洞，將threshold從0.3調到0.2就可以改善，不同的來源圖像需要的數值可能不同。
重繪背景
將上一個工作流的遮罩跟來源圖像輸入到重繪用的工作流中，加上批次出圖的節點，就可以一次更換多個背景。
這個工作流使用的節點：
- VAE Encode (for Inpainting) < 採用來源圖像
- Repeat Latent Batch < 調整批次數量
- Load Checkpoint
- Load VAE
- Batch Prompt Schedule < 使用批次語法設定提示詞
- Clip Text Encode (Prompt)
- KSampler
- VAE Decode
- Preview Image
跑完圖只要將Preview Image這個節點拉大就可以一次顯示多個圖像。
結論
經過這個流程重繪的背景會受到來源圖片的影響產生類似汙染或是不自然接縫的感覺，可以經過放大或再一次重繪後可以改善。
留言
留言分享你的想法！
你可能也想看
Google News 追蹤
全新 vocus 挑戰活動「方格人氣王」來啦～四大挑戰任你選，留言 / 愛心 / 瀏覽數大 PK，還有新手專屬挑戰！無論你是 vocus 上活躍創作者或剛加入的新手，都有機會被更多人看見，獲得站上版位曝光＆豐富獎勵！🏆
本文探討AI筆記工具的優缺點、選擇建議及未來趨勢，比較NotebookLM、OneNote+Copilot、Notion AI、Obsidian+GPT插件和Palantir Foundry等工具，並強調安全注意事項及個人需求評估的重要性。
2023年8月，ComfyUI推出了全新介面設計與功能更新，包括優化的前端代碼、每日夜間版本、穩定版本發布等，旨在提升用戶體驗與操作便利性。這篇文章將介紹主要的更新改動、新功能設置及使用者體驗改善，幫助你快速掌握ComfyUI的新變化。還有如何回到舊版介面及其它設定調整，讓使用變得更順手。
最近遇到一些人想做音訊的合成，我回答他或許可以從圖像風格轉換中找到些靈感，我才突然想起我對於這部分的認知只止於知道他能做什麼及結果大概如何，對於內部訓練邏輯及結構並沒有認真的去了解，現在剛好趁此機會好好的學習一下。
好用必收AI工具：終於可以更新大頭貼了！好幾年沒有換過社群的頭像了。最近剛好玩到一個超有趣的AI生圖工具，可以把臉部變成漫畫Q版的貼圖，真的很適合來當大頭貼呢！
全新 vocus 挑戰活動「方格人氣王」來啦～四大挑戰任你選，留言 / 愛心 / 瀏覽數大 PK，還有新手專屬挑戰！無論你是 vocus 上活躍創作者或剛加入的新手，都有機會被更多人看見，獲得站上版位曝光＆豐富獎勵！🏆
本文探討AI筆記工具的優缺點、選擇建議及未來趨勢，比較NotebookLM、OneNote+Copilot、Notion AI、Obsidian+GPT插件和Palantir Foundry等工具，並強調安全注意事項及個人需求評估的重要性。
2023年8月，ComfyUI推出了全新介面設計與功能更新，包括優化的前端代碼、每日夜間版本、穩定版本發布等，旨在提升用戶體驗與操作便利性。這篇文章將介紹主要的更新改動、新功能設置及使用者體驗改善，幫助你快速掌握ComfyUI的新變化。還有如何回到舊版介面及其它設定調整，讓使用變得更順手。
最近遇到一些人想做音訊的合成，我回答他或許可以從圖像風格轉換中找到些靈感，我才突然想起我對於這部分的認知只止於知道他能做什麼及結果大概如何，對於內部訓練邏輯及結構並沒有認真的去了解，現在剛好趁此機會好好的學習一下。
好用必收AI工具：終於可以更新大頭貼了！好幾年沒有換過社群的頭像了。最近剛好玩到一個超有趣的AI生圖工具，可以把臉部變成漫畫Q版的貼圖，真的很適合來當大頭貼呢！