ComfyUI研究 - IPAdapter FaceID

更新 發佈閱讀 1 分鐘

前言

FaceID是IPAdapter的一項好用的功能之一,經過原作者的不斷更新,FaceID有單獨的節點可以使用,套用FaceID的工作流可以很好的控制生成圖像的人物一致性,也可以混合多個人臉產生新的人物面貌。


工作流

使用IPAdapter Plus

為了測試FaceID的作用,先使用IPAdapter生成一張圖像。

raw-image

這邊採用的是高強度的IPAdapter Plus模型,生成的圖像與參考的圖像只有構圖跟髮型髮色相近,長相則完全不同。

比較如下圖。

raw-image


使用IPAdapter Plus Face

將上面的工作流中IPAdapter Unified Loader的Preset選項改為PLUS FACE(portrails),再次生成圖片後的比較如下圖。

raw-image

構圖跟參考圖片產生了一定的差距,人物的長相沒有比較相近。


使用FaceID

將IPAdapter節點改成IPAdapter FaceID節點。

新版的節點會自動載入對應的IPA模型跟FaceID Lora。

raw-image

產生的圖片比較如下圖。

raw-image

因為使用的是FaceID節點,所以生成圖像的構圖會比較不像參考圖像,但是長相方面比起前兩個測試結果更像參考圖像一點。


混合使用IPAdapter與IPAdapter FaceID

將IPAdapter與IPAdapter FaceID串接在一起後,可以達成同一人物風格轉換的效果,雖然權重必須調低,導致人物長相會有點不像參考圖片的人物。

raw-image


小結

比起之前的主流是使用Lora去達成特定人物生成圖像,FaceID可以省去訓練Lora所需的時間並達到不錯的效果,而且比起單純的換臉還要無違和一點。

如果沒有特定需求,使用FaceID已經可以實現許多創意想法。

留言
avatar-img
Frank Plaza
13.1K會員
89內容數
AI的時代已經來臨
Frank Plaza的其他內容
2024/04/06
這篇要搭建一個同時生成寫實照片跟動漫風格圖片的工作流,還可以幫線稿上色。
Thumbnail
2024/04/06
這篇要搭建一個同時生成寫實照片跟動漫風格圖片的工作流,還可以幫線稿上色。
Thumbnail
2024/04/02
測試一下InstantID
Thumbnail
2024/04/02
測試一下InstantID
Thumbnail
2024/03/31
IPAdapter節點重大更新,要不要更新呢?
Thumbnail
2024/03/31
IPAdapter節點重大更新,要不要更新呢?
Thumbnail
看更多
你可能也想看
Thumbnail
在 vocus 與你一起探索內容、發掘靈感的路上,我們又將啟動新的冒險——vocus App 正式推出! 現在起,你可以在 iOS App Store 下載全新上架的 vocus App。 無論是在通勤路上、日常空檔,或一天結束後的放鬆時刻,都能自在沈浸在內容宇宙中。
Thumbnail
在 vocus 與你一起探索內容、發掘靈感的路上,我們又將啟動新的冒險——vocus App 正式推出! 現在起,你可以在 iOS App Store 下載全新上架的 vocus App。 無論是在通勤路上、日常空檔,或一天結束後的放鬆時刻,都能自在沈浸在內容宇宙中。
Thumbnail
vocus 慶祝推出 App,舉辦 2026 全站慶。推出精選內容與數位商品折扣,訂單免費與紅包抽獎、新註冊會員專屬活動、Boba Boost 贊助抽紅包,以及全站徵文,並邀請你一起來回顧過去的一年, vocus 與創作者共同留下了哪些精彩創作。
Thumbnail
vocus 慶祝推出 App,舉辦 2026 全站慶。推出精選內容與數位商品折扣,訂單免費與紅包抽獎、新註冊會員專屬活動、Boba Boost 贊助抽紅包,以及全站徵文,並邀請你一起來回顧過去的一年, vocus 與創作者共同留下了哪些精彩創作。
Thumbnail
Face to Many 是一款強大的創意工具,它能將一張普通的臉部照片轉換為多種風格,像是將臉變成 3D、表情符號、像素、電子遊戲、黏土或玩具。只需要幾個步驟,就能輕鬆生成各種有趣的臉部圖像,需注意的是這款工具僅限於非商業用途使用。
Thumbnail
Face to Many 是一款強大的創意工具,它能將一張普通的臉部照片轉換為多種風格,像是將臉變成 3D、表情符號、像素、電子遊戲、黏土或玩具。只需要幾個步驟,就能輕鬆生成各種有趣的臉部圖像,需注意的是這款工具僅限於非商業用途使用。
Thumbnail
Face to sticker 是一個在Replicate上很熱門的model。使用者只要透過上傳自己的大頭照,後台就會快速的將你的圖片變成貼紙。 後台的操作很簡單,只要先上傳一張照片,然後點擊Generate並等待約30-45秒之後,就會產生圖片。 在facetosticker網站註冊之後
Thumbnail
Face to sticker 是一個在Replicate上很熱門的model。使用者只要透過上傳自己的大頭照,後台就會快速的將你的圖片變成貼紙。 後台的操作很簡單,只要先上傳一張照片,然後點擊Generate並等待約30-45秒之後,就會產生圖片。 在facetosticker網站註冊之後
Thumbnail
IP Adapter FaceID 是一個 AI 人體合成工具,上傳人物照片和輸入提示詞,會保留原來人臉並根據描述生成圖像,例如,用照片中的人臉生成美國隊長人像,也可以更換衣著、背景環境和轉換風
Thumbnail
IP Adapter FaceID 是一個 AI 人體合成工具,上傳人物照片和輸入提示詞,會保留原來人臉並根據描述生成圖像,例如,用照片中的人臉生成美國隊長人像,也可以更換衣著、背景環境和轉換風
Thumbnail
好用必收AI工具:終於可以更新大頭貼了!好幾年沒有換過社群的頭像了。最近剛好玩到一個超有趣的AI生圖工具,可以把臉部變成漫畫Q版的貼圖,真的很適合來當大頭貼呢!
Thumbnail
好用必收AI工具:終於可以更新大頭貼了!好幾年沒有換過社群的頭像了。最近剛好玩到一個超有趣的AI生圖工具,可以把臉部變成漫畫Q版的貼圖,真的很適合來當大頭貼呢!
Thumbnail
「 face-to-sticker」是一款免費工具,操作非常簡單,只需要上傳一張圖片,透過分析照片中的臉部特徵和表情,就可以將您的照片轉換為美式風格的貼紙。
Thumbnail
「 face-to-sticker」是一款免費工具,操作非常簡單,只需要上傳一張圖片,透過分析照片中的臉部特徵和表情,就可以將您的照片轉換為美式風格的貼紙。
Thumbnail
這篇要運用自動遮罩、重繪、批次的技巧,幫同一個人物更換不同背景。 自動遮罩 自動遮罩採用Segment Anything這個節點組,載入圖片後可以依指定的提示詞自動產生遮罩圖像,這邊我要更換的是背景,所以先讓AI抓出人物後,再反轉遮罩範圍輸出,為了讓重繪圖像不要過於生硬,將遮罩進行了高斯模糊。
Thumbnail
這篇要運用自動遮罩、重繪、批次的技巧,幫同一個人物更換不同背景。 自動遮罩 自動遮罩採用Segment Anything這個節點組,載入圖片後可以依指定的提示詞自動產生遮罩圖像,這邊我要更換的是背景,所以先讓AI抓出人物後,再反轉遮罩範圍輸出,為了讓重繪圖像不要過於生硬,將遮罩進行了高斯模糊。
Thumbnail
這是一個簡單的工作流,可以對輸入的圖片進行3D重建
Thumbnail
這是一個簡單的工作流,可以對輸入的圖片進行3D重建
Thumbnail
前篇測試如何把提示詞生成的圖像細節提高,這篇要測試的工作流是把任意圖像載入後經由放大模型放大,同時測試放大後重繪看看效果如何。
Thumbnail
前篇測試如何把提示詞生成的圖像細節提高,這篇要測試的工作流是把任意圖像載入後經由放大模型放大,同時測試放大後重繪看看效果如何。
Thumbnail
文字生成圖片的擴散生成模型,實際應用上並沒有想像中好用,原因在於,文字能夠乘載的訊息量太少,要產生好的生成結果一定程度仰賴特定的Prompt描述方法,如DALL-E3使用GPT4不斷增加描述的細節,讓文生圖的結果更好,有沒有更有效率的方式呢?
Thumbnail
文字生成圖片的擴散生成模型,實際應用上並沒有想像中好用,原因在於,文字能夠乘載的訊息量太少,要產生好的生成結果一定程度仰賴特定的Prompt描述方法,如DALL-E3使用GPT4不斷增加描述的細節,讓文生圖的結果更好,有沒有更有效率的方式呢?
追蹤感興趣的內容從 Google News 追蹤更多 vocus 的最新精選內容追蹤 Google News