ComfyUI研究 - IPAdapter FaceID

更新於 發佈於 閱讀時間約 1 分鐘

前言

FaceID是IPAdapter的一項好用的功能之一,經過原作者的不斷更新,FaceID有單獨的節點可以使用,套用FaceID的工作流可以很好的控制生成圖像的人物一致性,也可以混合多個人臉產生新的人物面貌。


工作流

使用IPAdapter Plus

為了測試FaceID的作用,先使用IPAdapter生成一張圖像。

raw-image

這邊採用的是高強度的IPAdapter Plus模型,生成的圖像與參考的圖像只有構圖跟髮型髮色相近,長相則完全不同。

比較如下圖。

raw-image


使用IPAdapter Plus Face

將上面的工作流中IPAdapter Unified Loader的Preset選項改為PLUS FACE(portrails),再次生成圖片後的比較如下圖。

raw-image

構圖跟參考圖片產生了一定的差距,人物的長相沒有比較相近。


使用FaceID

將IPAdapter節點改成IPAdapter FaceID節點。

新版的節點會自動載入對應的IPA模型跟FaceID Lora。

raw-image

產生的圖片比較如下圖。

raw-image

因為使用的是FaceID節點,所以生成圖像的構圖會比較不像參考圖像,但是長相方面比起前兩個測試結果更像參考圖像一點。


混合使用IPAdapter與IPAdapter FaceID

將IPAdapter與IPAdapter FaceID串接在一起後,可以達成同一人物風格轉換的效果,雖然權重必須調低,導致人物長相會有點不像參考圖片的人物。

raw-image


小結

比起之前的主流是使用Lora去達成特定人物生成圖像,FaceID可以省去訓練Lora所需的時間並達到不錯的效果,而且比起單純的換臉還要無違和一點。

如果沒有特定需求,使用FaceID已經可以實現許多創意想法。

avatar-img
7.8K會員
81內容數
AI的時代已經來臨
留言0
查看全部
avatar-img
發表第一個留言支持創作者!
Frank Hsu的沙龍 的其他內容
IPAdapter節點重大更新,要不要更新呢?
這篇要使用IPAdapter搭配遮罩來進行特殊的構圖方式。
這篇要用Controlnet去達成多人構圖的目標。
接續著前篇,接著我要使用圖生圖的方式去達成多人構圖的目的,本篇會使用幾種圖生圖的工作流去測試。
AI生成圖片並非完全可控,所以需要很多額外手段去控制,這篇要來試試幾個方法讓生成的圖片更加可控。
來測試SDXL Lightning模型是不是真的很神奇。
IPAdapter節點重大更新,要不要更新呢?
這篇要使用IPAdapter搭配遮罩來進行特殊的構圖方式。
這篇要用Controlnet去達成多人構圖的目標。
接續著前篇,接著我要使用圖生圖的方式去達成多人構圖的目的,本篇會使用幾種圖生圖的工作流去測試。
AI生成圖片並非完全可控,所以需要很多額外手段去控制,這篇要來試試幾個方法讓生成的圖片更加可控。
來測試SDXL Lightning模型是不是真的很神奇。
你可能也想看
Google News 追蹤
Thumbnail
iPhone保護貼會影響Face ID嗎?保護貼能防刮抗汙,且根據款式不同, 有防窺、過濾藍光、手感升級等好處,但有些果粉為iPhone加裝保護貼後, 發現無法臉部解鎖,結帳時要多次刷條碼才成功, 究竟哪些款式的iPhone保護貼可能影響Face ID偵測效果呢? 若Face ID偵測不到臉
Thumbnail
最近家裡安裝了電子鎖,由於我的指紋老是無法辨識成功,所以最後選擇有「人臉辨識」功能的產品。在這篇文章中,將介紹人臉辨識技術的基本原理和安全性,以及如何避免應用軟體漏洞的風險。
Thumbnail
IP Adapter FaceID 是一個 AI 人體合成工具,上傳人物照片和輸入提示詞,會保留原來人臉並根據描述生成圖像,例如,用照片中的人臉生成美國隊長人像,也可以更換衣著、背景環境和轉換風
Thumbnail
好用必收AI工具:終於可以更新大頭貼了!好幾年沒有換過社群的頭像了。最近剛好玩到一個超有趣的AI生圖工具,可以把臉部變成漫畫Q版的貼圖,真的很適合來當大頭貼呢!
Thumbnail
「 face-to-sticker」是一款免費工具,操作非常簡單,只需要上傳一張圖片,透過分析照片中的臉部特徵和表情,就可以將您的照片轉換為美式風格的貼紙。
Thumbnail
iPhone保護貼會影響Face ID嗎?保護貼能防刮抗汙,且根據款式不同, 有防窺、過濾藍光、手感升級等好處,但有些果粉為iPhone加裝保護貼後, 發現無法臉部解鎖,結帳時要多次刷條碼才成功, 究竟哪些款式的iPhone保護貼可能影響Face ID偵測效果呢? 若Face ID偵測不到臉
Thumbnail
最近家裡安裝了電子鎖,由於我的指紋老是無法辨識成功,所以最後選擇有「人臉辨識」功能的產品。在這篇文章中,將介紹人臉辨識技術的基本原理和安全性,以及如何避免應用軟體漏洞的風險。
Thumbnail
IP Adapter FaceID 是一個 AI 人體合成工具,上傳人物照片和輸入提示詞,會保留原來人臉並根據描述生成圖像,例如,用照片中的人臉生成美國隊長人像,也可以更換衣著、背景環境和轉換風
Thumbnail
好用必收AI工具:終於可以更新大頭貼了!好幾年沒有換過社群的頭像了。最近剛好玩到一個超有趣的AI生圖工具,可以把臉部變成漫畫Q版的貼圖,真的很適合來當大頭貼呢!
Thumbnail
「 face-to-sticker」是一款免費工具,操作非常簡單,只需要上傳一張圖片,透過分析照片中的臉部特徵和表情,就可以將您的照片轉換為美式風格的貼紙。