解密vtuber技術
更新於 發佈於 閱讀時間約 1 分鐘
現在vtuber有如雨後春筍般冒出,但你有想過他們到底是如何做出來這樣的角色並讓他和自己的動作同步嗎?現在就讓我來為你揭曉他們是怎麼辦到的吧!
1 .live2d+FaceRig
live2d是一個很有趣的2D技術,目前擁有這項技術的軟體只有Live2D Cubism,把2d圖片丟進去軟體裡,設定好關鍵幀,它就會幫你算出中間的圖片形成一個連續的動作,例如眨眼你只需要設定眨眼前和眨眼後的圖片,它就能幫你完成眨眼這個動作
facerig它則是一個動作的捕捉軟體,它能利用網路攝影機捕捉你的動作,例如你在眨眼的時候,它就知道你在做這個動作,進而反映到角色上面
只要在facerig和live2d中設定一些參數,你就能利用live2d中匯出的模型再加上facerig的動作捕捉便能實現vtuber的效果
2 .VRM+FaceRig
vrm是一個被利用於VR領域及vtuber領域的檔案格式,由於還很新,所以沒什麼軟體支持,所以在這裡推薦一個不錯又支持vrm的軟體:VRoid,它比較不像是3d的建模軟體,反而比較像是用捏臉的方式去做角色,也是蠻有趣的
facerig剛才介紹過了,就不再重複,只要導出vrm並匯入facerig,這種方式也能做出vtuber的效果,跟上面不同的是這個是3D的,前一個是2D的
3 .VRM+感測器+其他軟體
這個就是3D角色加上一些感測器,例如:leap motion或者那種感測衣,以及用一些專用軟體去做全身的偵測,但這個太貴了,所以只稍微提一下
3會員
5內容數
留言0
查看全部
你可能也想看
Google News 追蹤
現代社會跟以前不同了，人人都有一支手機，只要打開就可以獲得各種資訊。過去想要辦卡或是開戶就要跑一趟銀行，然而如今科技快速發展之下，金融App無聲無息地進到你生活中。但同樣的，每一家銀行都有自己的App時，我們又該如何選擇呢？(本文係由國泰世華銀行邀約)
今天我會用不同角度帶大家看這款國泰世華CUB
嘿，大家新年快樂~ 新年大家都在做什麼呢？
跨年夜的我趕工製作某個外包設計案，在工作告一段落時趕上倒數。
然後和兩個小孩過了一個忙亂的元旦。在深夜時刻，看到朋友傳來的解籤網站，興致勃勃熬夜體驗了一下，覺得非常好玩，或許有人玩過了，但還是想寫上來分享紀錄一下~
除了 Luma DreamMachine 以外，如果想用文字或照片自動生成影片的話，還有其他選擇嗎？可以試試 Vidu AI 生成式影片服務，一起了解如何使用 Vidu 及進階技巧，輕鬆製作二次元或東方臉孔的 AI 影片！Vocus 網友專屬避免踩坑資訊在最後一段。
目前 VTuber 的表演形式存在限制，譬如 YouTuber 經常做的「吃播」，對於 VTuber 來說就難以實現，將食物 3D 建模所花費的金錢過於高昂，而且效果也不見得能勾起觀眾食慾；權衡之下，好像只能鏡頭對食物拍攝。
創建虛擬角色想要賦予生動表情，或是讓歷史人物更變得栩栩如生，利用 AI 模型即可將靜態人物照片變成擁有表情的動態影像。LivePortrait AI 模型可以分析影片中的人物表情，並將其套用至靜態照片，產生具有與影片人物相同表情的動態人像。
我們最早就是在做動畫，從一般廣告開始，慢慢去擴展不同的類型，比如說遊戲、角色動畫、電視與電影的特效……等等，但是越做越專業的情況下，我們就想再去做一些延伸，像是虛擬攝影棚跟虛擬製作，我們找到這些工作項目的共通元素去發展，甚至到後面我們還去做互動設計、沉浸式多媒體展覽與現在時下最熱門的AI生成技術。
Stable Diffusion 的 Mov2Mov 套件是一個非常強大的工具，讓你可以自動化和簡化視頻轉換過程。這個套件特別適合那些希望在視頻中進行面部替換、添加配件或改變角色外觀的人。這裡是關於這個套件的一些詳細介紹：
功能和優點
自動化視頻轉換：
Mov2Mov 可以自動化視頻到
基礎魔法，就是攻擊跟防禦；
像是Revit最根本的建模方法，就是[攻擊]內建模型中 那五個，[防禦]最後就是空心幾何裡面的五個，交互混搭而成。
主要建模就是快速 塑型的能力，之後再加上簡單程式碼去操控。
Blender就是，操控[點、線、面]建模，加上boolean混和應用。
VRM 的演進
為了讓 3D 虛擬人物能夠在不同平台和應用之間無縫使用，VRM Consortium 於 2018 年推出了 VRM (VRM 動畫) 格式。VRM 是一種開放的 3D 檔案格式，它基於 glTF 標準，具有良好的兼容性和可擴展性，自推出以來，得到了廣泛的認可和應用。
現代社會跟以前不同了，人人都有一支手機，只要打開就可以獲得各種資訊。過去想要辦卡或是開戶就要跑一趟銀行，然而如今科技快速發展之下，金融App無聲無息地進到你生活中。但同樣的，每一家銀行都有自己的App時，我們又該如何選擇呢？(本文係由國泰世華銀行邀約)
今天我會用不同角度帶大家看這款國泰世華CUB
嘿，大家新年快樂~ 新年大家都在做什麼呢？
跨年夜的我趕工製作某個外包設計案，在工作告一段落時趕上倒數。
然後和兩個小孩過了一個忙亂的元旦。在深夜時刻，看到朋友傳來的解籤網站，興致勃勃熬夜體驗了一下，覺得非常好玩，或許有人玩過了，但還是想寫上來分享紀錄一下~
除了 Luma DreamMachine 以外，如果想用文字或照片自動生成影片的話，還有其他選擇嗎？可以試試 Vidu AI 生成式影片服務，一起了解如何使用 Vidu 及進階技巧，輕鬆製作二次元或東方臉孔的 AI 影片！Vocus 網友專屬避免踩坑資訊在最後一段。
目前 VTuber 的表演形式存在限制，譬如 YouTuber 經常做的「吃播」，對於 VTuber 來說就難以實現，將食物 3D 建模所花費的金錢過於高昂，而且效果也不見得能勾起觀眾食慾；權衡之下，好像只能鏡頭對食物拍攝。
創建虛擬角色想要賦予生動表情，或是讓歷史人物更變得栩栩如生，利用 AI 模型即可將靜態人物照片變成擁有表情的動態影像。LivePortrait AI 模型可以分析影片中的人物表情，並將其套用至靜態照片，產生具有與影片人物相同表情的動態人像。
我們最早就是在做動畫，從一般廣告開始，慢慢去擴展不同的類型，比如說遊戲、角色動畫、電視與電影的特效……等等，但是越做越專業的情況下，我們就想再去做一些延伸，像是虛擬攝影棚跟虛擬製作，我們找到這些工作項目的共通元素去發展，甚至到後面我們還去做互動設計、沉浸式多媒體展覽與現在時下最熱門的AI生成技術。
Stable Diffusion 的 Mov2Mov 套件是一個非常強大的工具，讓你可以自動化和簡化視頻轉換過程。這個套件特別適合那些希望在視頻中進行面部替換、添加配件或改變角色外觀的人。這裡是關於這個套件的一些詳細介紹：
功能和優點
自動化視頻轉換：
Mov2Mov 可以自動化視頻到
基礎魔法，就是攻擊跟防禦；
像是Revit最根本的建模方法，就是[攻擊]內建模型中 那五個，[防禦]最後就是空心幾何裡面的五個，交互混搭而成。
主要建模就是快速 塑型的能力，之後再加上簡單程式碼去操控。
Blender就是，操控[點、線、面]建模，加上boolean混和應用。
VRM 的演進
為了讓 3D 虛擬人物能夠在不同平台和應用之間無縫使用，VRM Consortium 於 2018 年推出了 VRM (VRM 動畫) 格式。VRM 是一種開放的 3D 檔案格式，它基於 glTF 標準，具有良好的兼容性和可擴展性，自推出以來，得到了廣泛的認可和應用。