ComfyUI 研究 - 多人構圖(四)

更新於 發佈於 閱讀時間約 1 分鐘

這篇要使用IPAdapter搭配遮罩來進行特殊的構圖方式。

工作流

生成遮罩

下面是在ComfyUI內產生遮罩的一個工作流。

raw-image

這個工作流是透過生成並結合不同遮罩,達到畫面分區的目的。

使用這個工作流生成遮罩需要事前規劃跟簡單的數學計算,也可以使用繪圖軟體去生成遮罩圖像來做為輸入使用。


IPAdapter

將上一個步驟生成的遮罩輸入到IPAdapter,並載入參考圖片,因為IPAdapter訓練時採用的是方型圖片,所以須要使用Prepare Image For Clip Vision節點將圖片裁切成方型,裁切完的會是512*512的圖片。

raw-image


生成圖片

生成圖片時採用的是一般的工作流,因為單純想要看測試的效果,保持簡單就好。

raw-image


效果呈現

偏重一側的構圖

下圖左邊是生成的遮罩圖,右邊是生成的圖片。

raw-image


可以看到人物集中在左側,這是將遮罩輸入到IPAapter後的效果,IPAdapter將來源圖片的元素提取後,在遮罩的左側空白處產生影響,右側則是受到模型跟文字提示詞控制。


分成三區塊的構圖

下圖輸入的遮罩分為三個區塊,白色區域受IPAdapter控制,中間黑色區塊則是輸入bear文字提示詞。

raw-image


下圖是另一個分成三區塊的構圖,雖然天真的認為人物會按照遮罩比例有所差異,但數次測試下來還是呈現比較隨機的結果。

raw-image


還要更多?

下圖試著生成四個區塊的遮罩,也順利地生成了四個角色的圖片。

raw-image


小結

採用本篇測試的方法理論上可以生成更多人物在同一張圖片中,只是光靠遮罩生成的工作流需要耗費較多時間去將畫面分區,如果在其他繪圖軟體中將遮罩繪製出來,再輸入給IPAdapter去控制畫面,應該可以產生更多變化。

avatar-img
7.3K會員
81內容數
AI的時代已經來臨
留言0
查看全部
avatar-img
發表第一個留言支持創作者!
Frank Hsu的沙龍 的其他內容
這篇要用Controlnet去達成多人構圖的目標。
接續著前篇,接著我要使用圖生圖的方式去達成多人構圖的目的,本篇會使用幾種圖生圖的工作流去測試。
AI生成圖片並非完全可控,所以需要很多額外手段去控制,這篇要來試試幾個方法讓生成的圖片更加可控。
來測試SDXL Lightning模型是不是真的很神奇。
這篇要搭建製作透明背景素材的工作流。
這篇要用Controlnet去達成多人構圖的目標。
接續著前篇,接著我要使用圖生圖的方式去達成多人構圖的目的,本篇會使用幾種圖生圖的工作流去測試。
AI生成圖片並非完全可控,所以需要很多額外手段去控制,這篇要來試試幾個方法讓生成的圖片更加可控。
來測試SDXL Lightning模型是不是真的很神奇。
這篇要搭建製作透明背景素材的工作流。
你可能也想看
Google News 追蹤
Thumbnail
嘿,大家新年快樂~ 新年大家都在做什麼呢? 跨年夜的我趕工製作某個外包設計案,在工作告一段落時趕上倒數。 然後和兩個小孩過了一個忙亂的元旦。在深夜時刻,看到朋友傳來的解籤網站,興致勃勃熬夜體驗了一下,覺得非常好玩,或許有人玩過了,但還是想寫上來分享紀錄一下~
Thumbnail
自由接案好像很自由、容易,卻需要點方向的指引,希望這篇的分享能給予你一些幫助。
Thumbnail
這篇文章教你如何製作側邊欄,包括準備工作、HTML和CSS的部分,還有一些互動效果。文章涵蓋了連結、圖片、超連結、大小、顏色、排版、flex和滑鼠互動等內容。
Thumbnail
實時繪圖(一)-安裝ComfyUI+krita心得與教學繼這一篇安裝完畢後,就是開始挑戰電商產品圖製作,意外的簡單,基本上素材找好,在調整個2分鐘,就完成了 接下來我就把我做的方法與步驟分享給大家巴 首先先找好的你的透明素材產品,那麼免費的素材網站我已經幫你找好了,可以商用,請注意一定要用去背的
Thumbnail
觀察者模式透過主題訂閱/訊息通知的機制,極度增強系統的可擴展性、靈活性以及降低組件間的耦合度。概念直觀簡單,是非常實用的設計模式。
Thumbnail
代理模式通過封裝原始對象來實現對該對象的控制和管理,同時不改變原始對象的行為或客戶端與該對象互動的方式,以此介入或增強對該對象的訪問和操作。
1 文字之後補充 2 3 4 5
Thumbnail
《包圍》 照夜白電腦繪圖作品 使用軟體:Photoshop
Thumbnail
嘿,大家新年快樂~ 新年大家都在做什麼呢? 跨年夜的我趕工製作某個外包設計案,在工作告一段落時趕上倒數。 然後和兩個小孩過了一個忙亂的元旦。在深夜時刻,看到朋友傳來的解籤網站,興致勃勃熬夜體驗了一下,覺得非常好玩,或許有人玩過了,但還是想寫上來分享紀錄一下~
Thumbnail
自由接案好像很自由、容易,卻需要點方向的指引,希望這篇的分享能給予你一些幫助。
Thumbnail
這篇文章教你如何製作側邊欄,包括準備工作、HTML和CSS的部分,還有一些互動效果。文章涵蓋了連結、圖片、超連結、大小、顏色、排版、flex和滑鼠互動等內容。
Thumbnail
實時繪圖(一)-安裝ComfyUI+krita心得與教學繼這一篇安裝完畢後,就是開始挑戰電商產品圖製作,意外的簡單,基本上素材找好,在調整個2分鐘,就完成了 接下來我就把我做的方法與步驟分享給大家巴 首先先找好的你的透明素材產品,那麼免費的素材網站我已經幫你找好了,可以商用,請注意一定要用去背的
Thumbnail
觀察者模式透過主題訂閱/訊息通知的機制,極度增強系統的可擴展性、靈活性以及降低組件間的耦合度。概念直觀簡單,是非常實用的設計模式。
Thumbnail
代理模式通過封裝原始對象來實現對該對象的控制和管理,同時不改變原始對象的行為或客戶端與該對象互動的方式,以此介入或增強對該對象的訪問和操作。
1 文字之後補充 2 3 4 5
Thumbnail
《包圍》 照夜白電腦繪圖作品 使用軟體:Photoshop