ComfyUI研究 - IPAdapter FaceID

更新於 發佈於 閱讀時間約 1 分鐘

前言

FaceID是IPAdapter的一項好用的功能之一,經過原作者的不斷更新,FaceID有單獨的節點可以使用,套用FaceID的工作流可以很好的控制生成圖像的人物一致性,也可以混合多個人臉產生新的人物面貌。


工作流

使用IPAdapter Plus

為了測試FaceID的作用,先使用IPAdapter生成一張圖像。

raw-image

這邊採用的是高強度的IPAdapter Plus模型,生成的圖像與參考的圖像只有構圖跟髮型髮色相近,長相則完全不同。

比較如下圖。

raw-image


使用IPAdapter Plus Face

將上面的工作流中IPAdapter Unified Loader的Preset選項改為PLUS FACE(portrails),再次生成圖片後的比較如下圖。

raw-image

構圖跟參考圖片產生了一定的差距,人物的長相沒有比較相近。


使用FaceID

將IPAdapter節點改成IPAdapter FaceID節點。

新版的節點會自動載入對應的IPA模型跟FaceID Lora。

raw-image

產生的圖片比較如下圖。

raw-image

因為使用的是FaceID節點,所以生成圖像的構圖會比較不像參考圖像,但是長相方面比起前兩個測試結果更像參考圖像一點。


混合使用IPAdapter與IPAdapter FaceID

將IPAdapter與IPAdapter FaceID串接在一起後,可以達成同一人物風格轉換的效果,雖然權重必須調低,導致人物長相會有點不像參考圖片的人物。

raw-image


小結

比起之前的主流是使用Lora去達成特定人物生成圖像,FaceID可以省去訓練Lora所需的時間並達到不錯的效果,而且比起單純的換臉還要無違和一點。

如果沒有特定需求,使用FaceID已經可以實現許多創意想法。

留言
avatar-img
留言分享你的想法!
avatar-img
Frank Plaza
10.0K會員
88內容數
AI的時代已經來臨
Frank Plaza的其他內容
2024/04/06
這篇要搭建一個同時生成寫實照片跟動漫風格圖片的工作流,還可以幫線稿上色。
Thumbnail
2024/04/06
這篇要搭建一個同時生成寫實照片跟動漫風格圖片的工作流,還可以幫線稿上色。
Thumbnail
2024/04/02
測試一下InstantID
Thumbnail
2024/04/02
測試一下InstantID
Thumbnail
2024/03/31
IPAdapter節點重大更新,要不要更新呢?
Thumbnail
2024/03/31
IPAdapter節點重大更新,要不要更新呢?
Thumbnail
看更多
你可能也想看
Thumbnail
每年4月、5月都是最多稅要繳的月份,當然大部份的人都是有機會繳到「綜合所得稅」,只是相當相當多人還不知道,原來繳給政府的稅!可以透過一些有活動的銀行信用卡或電子支付來繳,從繳費中賺一點點小確幸!就是賺個1%~2%大家也是很開心的,因為你們把沒回饋變成有回饋,就是用卡的最高境界 所得稅線上申報
Thumbnail
每年4月、5月都是最多稅要繳的月份,當然大部份的人都是有機會繳到「綜合所得稅」,只是相當相當多人還不知道,原來繳給政府的稅!可以透過一些有活動的銀行信用卡或電子支付來繳,從繳費中賺一點點小確幸!就是賺個1%~2%大家也是很開心的,因為你們把沒回饋變成有回饋,就是用卡的最高境界 所得稅線上申報
Thumbnail
Face to Many 是一款強大的創意工具,它能將一張普通的臉部照片轉換為多種風格,像是將臉變成 3D、表情符號、像素、電子遊戲、黏土或玩具。只需要幾個步驟,就能輕鬆生成各種有趣的臉部圖像,需注意的是這款工具僅限於非商業用途使用。
Thumbnail
Face to Many 是一款強大的創意工具,它能將一張普通的臉部照片轉換為多種風格,像是將臉變成 3D、表情符號、像素、電子遊戲、黏土或玩具。只需要幾個步驟,就能輕鬆生成各種有趣的臉部圖像,需注意的是這款工具僅限於非商業用途使用。
Thumbnail
Face to sticker 是一個在Replicate上很熱門的model。使用者只要透過上傳自己的大頭照,後台就會快速的將你的圖片變成貼紙。 後台的操作很簡單,只要先上傳一張照片,然後點擊Generate並等待約30-45秒之後,就會產生圖片。 在facetosticker網站註冊之後
Thumbnail
Face to sticker 是一個在Replicate上很熱門的model。使用者只要透過上傳自己的大頭照,後台就會快速的將你的圖片變成貼紙。 後台的操作很簡單,只要先上傳一張照片,然後點擊Generate並等待約30-45秒之後,就會產生圖片。 在facetosticker網站註冊之後
Thumbnail
IP Adapter FaceID 是一個 AI 人體合成工具,上傳人物照片和輸入提示詞,會保留原來人臉並根據描述生成圖像,例如,用照片中的人臉生成美國隊長人像,也可以更換衣著、背景環境和轉換風
Thumbnail
IP Adapter FaceID 是一個 AI 人體合成工具,上傳人物照片和輸入提示詞,會保留原來人臉並根據描述生成圖像,例如,用照片中的人臉生成美國隊長人像,也可以更換衣著、背景環境和轉換風
Thumbnail
好用必收AI工具:終於可以更新大頭貼了!好幾年沒有換過社群的頭像了。最近剛好玩到一個超有趣的AI生圖工具,可以把臉部變成漫畫Q版的貼圖,真的很適合來當大頭貼呢!
Thumbnail
好用必收AI工具:終於可以更新大頭貼了!好幾年沒有換過社群的頭像了。最近剛好玩到一個超有趣的AI生圖工具,可以把臉部變成漫畫Q版的貼圖,真的很適合來當大頭貼呢!
Thumbnail
「 face-to-sticker」是一款免費工具,操作非常簡單,只需要上傳一張圖片,透過分析照片中的臉部特徵和表情,就可以將您的照片轉換為美式風格的貼紙。
Thumbnail
「 face-to-sticker」是一款免費工具,操作非常簡單,只需要上傳一張圖片,透過分析照片中的臉部特徵和表情,就可以將您的照片轉換為美式風格的貼紙。
Thumbnail
這篇要運用自動遮罩、重繪、批次的技巧,幫同一個人物更換不同背景。 自動遮罩 自動遮罩採用Segment Anything這個節點組,載入圖片後可以依指定的提示詞自動產生遮罩圖像,這邊我要更換的是背景,所以先讓AI抓出人物後,再反轉遮罩範圍輸出,為了讓重繪圖像不要過於生硬,將遮罩進行了高斯模糊。
Thumbnail
這篇要運用自動遮罩、重繪、批次的技巧,幫同一個人物更換不同背景。 自動遮罩 自動遮罩採用Segment Anything這個節點組,載入圖片後可以依指定的提示詞自動產生遮罩圖像,這邊我要更換的是背景,所以先讓AI抓出人物後,再反轉遮罩範圍輸出,為了讓重繪圖像不要過於生硬,將遮罩進行了高斯模糊。
追蹤感興趣的內容從 Google News 追蹤更多 vocus 的最新精選內容追蹤 Google News