ComfyUI研究 - IPAdapter FaceID

更新於 發佈於 閱讀時間約 1 分鐘

前言

FaceID是IPAdapter的一項好用的功能之一,經過原作者的不斷更新,FaceID有單獨的節點可以使用,套用FaceID的工作流可以很好的控制生成圖像的人物一致性,也可以混合多個人臉產生新的人物面貌。


工作流

使用IPAdapter Plus

為了測試FaceID的作用,先使用IPAdapter生成一張圖像。

raw-image

這邊採用的是高強度的IPAdapter Plus模型,生成的圖像與參考的圖像只有構圖跟髮型髮色相近,長相則完全不同。

比較如下圖。

raw-image


使用IPAdapter Plus Face

將上面的工作流中IPAdapter Unified Loader的Preset選項改為PLUS FACE(portrails),再次生成圖片後的比較如下圖。

raw-image

構圖跟參考圖片產生了一定的差距,人物的長相沒有比較相近。


使用FaceID

將IPAdapter節點改成IPAdapter FaceID節點。

新版的節點會自動載入對應的IPA模型跟FaceID Lora。

raw-image

產生的圖片比較如下圖。

raw-image

因為使用的是FaceID節點,所以生成圖像的構圖會比較不像參考圖像,但是長相方面比起前兩個測試結果更像參考圖像一點。


混合使用IPAdapter與IPAdapter FaceID

將IPAdapter與IPAdapter FaceID串接在一起後,可以達成同一人物風格轉換的效果,雖然權重必須調低,導致人物長相會有點不像參考圖片的人物。

raw-image


小結

比起之前的主流是使用Lora去達成特定人物生成圖像,FaceID可以省去訓練Lora所需的時間並達到不錯的效果,而且比起單純的換臉還要無違和一點。

如果沒有特定需求,使用FaceID已經可以實現許多創意想法。

avatar-img
7.3K會員
81內容數
AI的時代已經來臨
留言0
查看全部
avatar-img
發表第一個留言支持創作者!
Frank Hsu的沙龍 的其他內容
IPAdapter節點重大更新,要不要更新呢?
這篇要使用IPAdapter搭配遮罩來進行特殊的構圖方式。
這篇要用Controlnet去達成多人構圖的目標。
接續著前篇,接著我要使用圖生圖的方式去達成多人構圖的目的,本篇會使用幾種圖生圖的工作流去測試。
AI生成圖片並非完全可控,所以需要很多額外手段去控制,這篇要來試試幾個方法讓生成的圖片更加可控。
來測試SDXL Lightning模型是不是真的很神奇。
IPAdapter節點重大更新,要不要更新呢?
這篇要使用IPAdapter搭配遮罩來進行特殊的構圖方式。
這篇要用Controlnet去達成多人構圖的目標。
接續著前篇,接著我要使用圖生圖的方式去達成多人構圖的目的,本篇會使用幾種圖生圖的工作流去測試。
AI生成圖片並非完全可控,所以需要很多額外手段去控制,這篇要來試試幾個方法讓生成的圖片更加可控。
來測試SDXL Lightning模型是不是真的很神奇。
你可能也想看
Google News 追蹤
Thumbnail
嘿,大家新年快樂~ 新年大家都在做什麼呢? 跨年夜的我趕工製作某個外包設計案,在工作告一段落時趕上倒數。 然後和兩個小孩過了一個忙亂的元旦。在深夜時刻,看到朋友傳來的解籤網站,興致勃勃熬夜體驗了一下,覺得非常好玩,或許有人玩過了,但還是想寫上來分享紀錄一下~
Thumbnail
iPhone保護貼會影響Face ID嗎?保護貼能防刮抗汙,且根據款式不同, 有防窺、過濾藍光、手感升級等好處,但有些果粉為iPhone加裝保護貼後, 發現無法臉部解鎖,結帳時要多次刷條碼才成功, 究竟哪些款式的iPhone保護貼可能影響Face ID偵測效果呢? 若Face ID偵測不到臉
Thumbnail
最近家裡安裝了電子鎖,由於我的指紋老是無法辨識成功,所以最後選擇有「人臉辨識」功能的產品。在這篇文章中,將介紹人臉辨識技術的基本原理和安全性,以及如何避免應用軟體漏洞的風險。
Thumbnail
IP Adapter FaceID 是一個 AI 人體合成工具,上傳人物照片和輸入提示詞,會保留原來人臉並根據描述生成圖像,例如,用照片中的人臉生成美國隊長人像,也可以更換衣著、背景環境和轉換風
Thumbnail
好用必收AI工具:終於可以更新大頭貼了!好幾年沒有換過社群的頭像了。最近剛好玩到一個超有趣的AI生圖工具,可以把臉部變成漫畫Q版的貼圖,真的很適合來當大頭貼呢!
Thumbnail
「 face-to-sticker」是一款免費工具,操作非常簡單,只需要上傳一張圖片,透過分析照片中的臉部特徵和表情,就可以將您的照片轉換為美式風格的貼紙。
Thumbnail
嘿,大家新年快樂~ 新年大家都在做什麼呢? 跨年夜的我趕工製作某個外包設計案,在工作告一段落時趕上倒數。 然後和兩個小孩過了一個忙亂的元旦。在深夜時刻,看到朋友傳來的解籤網站,興致勃勃熬夜體驗了一下,覺得非常好玩,或許有人玩過了,但還是想寫上來分享紀錄一下~
Thumbnail
iPhone保護貼會影響Face ID嗎?保護貼能防刮抗汙,且根據款式不同, 有防窺、過濾藍光、手感升級等好處,但有些果粉為iPhone加裝保護貼後, 發現無法臉部解鎖,結帳時要多次刷條碼才成功, 究竟哪些款式的iPhone保護貼可能影響Face ID偵測效果呢? 若Face ID偵測不到臉
Thumbnail
最近家裡安裝了電子鎖,由於我的指紋老是無法辨識成功,所以最後選擇有「人臉辨識」功能的產品。在這篇文章中,將介紹人臉辨識技術的基本原理和安全性,以及如何避免應用軟體漏洞的風險。
Thumbnail
IP Adapter FaceID 是一個 AI 人體合成工具,上傳人物照片和輸入提示詞,會保留原來人臉並根據描述生成圖像,例如,用照片中的人臉生成美國隊長人像,也可以更換衣著、背景環境和轉換風
Thumbnail
好用必收AI工具:終於可以更新大頭貼了!好幾年沒有換過社群的頭像了。最近剛好玩到一個超有趣的AI生圖工具,可以把臉部變成漫畫Q版的貼圖,真的很適合來當大頭貼呢!
Thumbnail
「 face-to-sticker」是一款免費工具,操作非常簡單,只需要上傳一張圖片,透過分析照片中的臉部特徵和表情,就可以將您的照片轉換為美式風格的貼紙。