ComfyUI 研究 - Face Swap

更新於 發佈於 閱讀時間約 1 分鐘

這篇要測試的工作流是Face Swap,透過ComfyUI Manger可以搜尋到四個Custom Node包含Face Swap節點。

  1. MTB Nodes
  2. ReActor Node for ComfyUI
  3. FaceSwap
  4. Character Face Swap

測試過後1,2可以順利執行,3測試失敗,4的工作流過於複雜未測試,因此建構出如下圖的工作流,測試時使用的圖像皆是AI產生的圖像。

raw-image

圖片中由左至右分別是來源圖像>目標圖像>Face Swap(mtb)>Face Restore>ReActor

測試結果顯示ReActor是整合了Face Swap(mtb)>Face Restore這兩個節點的工作,因此將工作流簡化如下圖。

raw-image

這個工作流由以下的Nodes組成:

  • Load Image
  • ReActer - Fast Face Swap
  • Preview Image

其中swap_model,facedetection,face_restore_model中的模型在執行時有缺少會自動下載,或是另外下載後放到對應的資料夾中。

這個工作流的特色是簡單且不需要其他模型,缺點是會受到載入圖片的解析度影響生成的圖片解析度。

raw-image

上圖中我的來源圖片是512x768,目標圖片是1024x1536,生成圖片是1024x1536,結果生成的圖片臉變得比較模糊,下圖是將來源圖片與目標圖片對調後生成的512x768圖片,臉的細部保持得比較好。

raw-image

換臉技術在AI繪圖中應該是熱門項目,原本需要另外訓練模型才能達成人物的一致性,但在Face Swap之類的技術出現後可以快速且暴力的進行換臉,雖然容易產生爭議,造成有些模型或項目中止甚至消失,不過類似的技術會不斷地推出且更加方便使用。

留言
avatar-img
留言分享你的想法!
avatar-img
Frank Plaza
9.7K會員
88內容數
AI的時代已經來臨
Frank Plaza的其他內容
2024/04/06
這篇要搭建一個同時生成寫實照片跟動漫風格圖片的工作流,還可以幫線稿上色。
Thumbnail
2024/04/06
這篇要搭建一個同時生成寫實照片跟動漫風格圖片的工作流,還可以幫線稿上色。
Thumbnail
2024/04/02
測試一下InstantID
Thumbnail
2024/04/02
測試一下InstantID
Thumbnail
2024/04/01
測試一下 IPAdapter FaceID
Thumbnail
2024/04/01
測試一下 IPAdapter FaceID
Thumbnail
看更多
你可能也想看
Thumbnail
「欸!這是在哪裡買的?求連結 🥺」 誰叫你太有品味,一發就讓大家跟著剁手手? 讓你回購再回購的生活好物,是時候該介紹出場了吧! 「開箱你的美好生活」現正召喚各路好物的開箱使者 🤩
Thumbnail
「欸!這是在哪裡買的?求連結 🥺」 誰叫你太有品味,一發就讓大家跟著剁手手? 讓你回購再回購的生活好物,是時候該介紹出場了吧! 「開箱你的美好生活」現正召喚各路好物的開箱使者 🤩
Thumbnail
上篇我們已經把風格融入在一個網路之中,實現了訓練一次就可以轉換不同的圖片成我們訓練的風格,但是這樣還不夠,因為這樣每個風格都得訓練一個網路來轉換,太浪費了,那麼,我們有沒有辦法在同一個網路中訓練多個風格呢?
Thumbnail
上篇我們已經把風格融入在一個網路之中,實現了訓練一次就可以轉換不同的圖片成我們訓練的風格,但是這樣還不夠,因為這樣每個風格都得訓練一個網路來轉換,太浪費了,那麼,我們有沒有辦法在同一個網路中訓練多個風格呢?
Thumbnail
這篇要使用IPAdapter搭配遮罩來進行特殊的構圖方式。
Thumbnail
這篇要使用IPAdapter搭配遮罩來進行特殊的構圖方式。
Thumbnail
這篇的主要目的是搭建出基本可用的Controlnet工作流。
Thumbnail
這篇的主要目的是搭建出基本可用的Controlnet工作流。
Thumbnail
這篇要測試的工作流是Face Swap。
Thumbnail
這篇要測試的工作流是Face Swap。
Thumbnail
這是為了搭建自己想要的工作流而開始的研究工作。
Thumbnail
這是為了搭建自己想要的工作流而開始的研究工作。
追蹤感興趣的內容從 Google News 追蹤更多 vocus 的最新精選內容追蹤 Google News