解密vtuber技術

閱讀時間約 1 分鐘
現在vtuber有如雨後春筍般冒出,但你有想過他們到底是如何做出來這樣的角色並讓他和自己的動作同步嗎?現在就讓我來為你揭曉他們是怎麼辦到的吧!

1 .live2d+FaceRig

live2d cubism工作畫面
live2d是一個很有趣的2D技術,目前擁有這項技術的軟體只有Live2D Cubism,把2d圖片丟進去軟體裡,設定好關鍵幀,它就會幫你算出中間的圖片形成一個連續的動作,例如眨眼你只需要設定眨眼前和眨眼後的圖片,它就能幫你完成眨眼這個動作
facerig steam畫面
facerig它則是一個動作的捕捉軟體,它能利用網路攝影機捕捉你的動作,例如你在眨眼的時候,它就知道你在做這個動作,進而反映到角色上面
只要在facerig和live2d中設定一些參數,你就能利用live2d中匯出的模型再加上facerig的動作捕捉便能實現vtuber的效果

2 .VRM+FaceRig

vroid工作畫面
vrm是一個被利用於VR領域及vtuber領域的檔案格式,由於還很新,所以沒什麼軟體支持,所以在這裡推薦一個不錯又支持vrm的軟體:VRoid,它比較不像是3d的建模軟體,反而比較像是用捏臉的方式去做角色,也是蠻有趣的
facerig剛才介紹過了,就不再重複,只要導出vrm並匯入facerig,這種方式也能做出vtuber的效果,跟上面不同的是這個是3D的,前一個是2D的

3 .VRM+感測器+其他軟體

leap motion官網
這個就是3D角色加上一些感測器,例如:leap motion或者那種感測衣,以及用一些專用軟體去做全身的偵測,但這個太貴了,所以只稍微提一下
avatar-img
3會員
5內容數
留言0
查看全部
avatar-img
發表第一個留言支持創作者!
科學育的沙龍 的其他內容
對於電腦空間不足,你是否也感覺很頭痛呢? 其實電腦用久了就會產生很多無用的垃圾檔案,只要把它刪除就能清理出很多空間 在這個文章中將教你最實用的清理垃圾方法,讓你的電腦再也不被垃圾占滿
電腦是我們日常生活中不可或缺的一部份,但你有曾經了解過它裡面的構造嗎?如果沒有那這篇文章將帶你認識你所不知道的電腦
在資訊大爆炸的時代,知識已不再那麼的昂貴,更重要的是終生學習及各種考試考不出來的能力,而對於很多人來說,他們都還沒有意識到這一點,甚至有些人覺得只要學歷越高,以後出來找工作會比較容易,但是在這個年代學歷越高越好找工作已經不存在了
對於電腦空間不足,你是否也感覺很頭痛呢? 其實電腦用久了就會產生很多無用的垃圾檔案,只要把它刪除就能清理出很多空間 在這個文章中將教你最實用的清理垃圾方法,讓你的電腦再也不被垃圾占滿
電腦是我們日常生活中不可或缺的一部份,但你有曾經了解過它裡面的構造嗎?如果沒有那這篇文章將帶你認識你所不知道的電腦
在資訊大爆炸的時代,知識已不再那麼的昂貴,更重要的是終生學習及各種考試考不出來的能力,而對於很多人來說,他們都還沒有意識到這一點,甚至有些人覺得只要學歷越高,以後出來找工作會比較容易,但是在這個年代學歷越高越好找工作已經不存在了
你可能也想看
Google News 追蹤
Thumbnail
早安,這裡是楓綾,Vroid初心者,最近剛確定了我人設的衣服與其他設定,於是決定將目前的雛型發上來。
Thumbnail
除了 Luma DreamMachine 以外,如果想用文字或照片自動生成影片的話,還有其他選擇嗎?可以試試 Vidu AI 生成式影片服務,一起了解如何使用 Vidu 及進階技巧,輕鬆製作二次元或東方臉孔的 AI 影片!Vocus 網友專屬避免踩坑資訊在最後一段。
Thumbnail
目前 VTuber 的表演形式存在限制,譬如 YouTuber 經常做的「吃播」,對於 VTuber 來說就難以實現,將食物 3D 建模所花費的金錢過於高昂,而且效果也不見得能勾起觀眾食慾;權衡之下,好像只能鏡頭對食物拍攝。
Thumbnail
創建虛擬角色想要賦予生動表情,或是讓歷史人物更變得栩栩如生,利用 AI 模型即可將靜態人物照片變成擁有表情的動態影像。LivePortrait AI 模型可以分析影片中的人物表情,並將其套用至靜態照片,產生具有與影片人物相同表情的動態人像。
Thumbnail
我們最早就是在做動畫,從一般廣告開始,慢慢去擴展不同的類型,比如說遊戲、角色動畫、電視與電影的特效……等等,但是越做越專業的情況下,我們就想再去做一些延伸,像是虛擬攝影棚跟虛擬製作,我們找到這些工作項目的共通元素去發展,甚至到後面我們還去做互動設計、沉浸式多媒體展覽與現在時下最熱門的AI生成技術。
Thumbnail
Stable Diffusion 的 Mov2Mov 套件是一個非常強大的工具,讓你可以自動化和簡化視頻轉換過程。這個套件特別適合那些希望在視頻中進行面部替換、添加配件或改變角色外觀的人。這裡是關於這個套件的一些詳細介紹: 功能和優點 自動化視頻轉換: Mov2Mov 可以自動化視頻到
Thumbnail
從文字輸入建立 3D 頭像動畫代表了重大飛躍。想像一下,只需輸入幾句話,就可以看到一個詳細、栩栩如生的頭像在螢幕上栩栩如生,並以逼真的動畫移動。這項技術並不是科幻小說中的幻想;而是一種技術。這是由尖端人工智慧 (AI) 驅動的令人興奮的現實。文字描述向動畫角色的轉變正在重塑數位創造力,並為個
Thumbnail
基礎魔法,就是攻擊跟防禦; 像是Revit最根本的建模方法,就是[攻擊]內建模型中 那五個,[防禦]最後就是空心幾何裡面的五個,交互混搭而成。 主要建模就是快速 塑型的能力,之後再加上簡單程式碼去操控。 Blender就是,操控[點、線、面]建模,加上boolean混和應用。
Thumbnail
這篇要介紹AI生成影片的兩個方式:SVD 跟 AnimateDiff。
Thumbnail
VRM 的演進 為了讓 3D 虛擬人物能夠在不同平台和應用之間無縫使用,VRM Consortium 於 2018 年推出了 VRM (VRM 動畫) 格式。VRM 是一種開放的 3D 檔案格式,它基於 glTF 標準,具有良好的兼容性和可擴展性,自推出以來,得到了廣泛的認可和應用。
Thumbnail
早安,這裡是楓綾,Vroid初心者,最近剛確定了我人設的衣服與其他設定,於是決定將目前的雛型發上來。
Thumbnail
除了 Luma DreamMachine 以外,如果想用文字或照片自動生成影片的話,還有其他選擇嗎?可以試試 Vidu AI 生成式影片服務,一起了解如何使用 Vidu 及進階技巧,輕鬆製作二次元或東方臉孔的 AI 影片!Vocus 網友專屬避免踩坑資訊在最後一段。
Thumbnail
目前 VTuber 的表演形式存在限制,譬如 YouTuber 經常做的「吃播」,對於 VTuber 來說就難以實現,將食物 3D 建模所花費的金錢過於高昂,而且效果也不見得能勾起觀眾食慾;權衡之下,好像只能鏡頭對食物拍攝。
Thumbnail
創建虛擬角色想要賦予生動表情,或是讓歷史人物更變得栩栩如生,利用 AI 模型即可將靜態人物照片變成擁有表情的動態影像。LivePortrait AI 模型可以分析影片中的人物表情,並將其套用至靜態照片,產生具有與影片人物相同表情的動態人像。
Thumbnail
我們最早就是在做動畫,從一般廣告開始,慢慢去擴展不同的類型,比如說遊戲、角色動畫、電視與電影的特效……等等,但是越做越專業的情況下,我們就想再去做一些延伸,像是虛擬攝影棚跟虛擬製作,我們找到這些工作項目的共通元素去發展,甚至到後面我們還去做互動設計、沉浸式多媒體展覽與現在時下最熱門的AI生成技術。
Thumbnail
Stable Diffusion 的 Mov2Mov 套件是一個非常強大的工具,讓你可以自動化和簡化視頻轉換過程。這個套件特別適合那些希望在視頻中進行面部替換、添加配件或改變角色外觀的人。這裡是關於這個套件的一些詳細介紹: 功能和優點 自動化視頻轉換: Mov2Mov 可以自動化視頻到
Thumbnail
從文字輸入建立 3D 頭像動畫代表了重大飛躍。想像一下,只需輸入幾句話,就可以看到一個詳細、栩栩如生的頭像在螢幕上栩栩如生,並以逼真的動畫移動。這項技術並不是科幻小說中的幻想;而是一種技術。這是由尖端人工智慧 (AI) 驅動的令人興奮的現實。文字描述向動畫角色的轉變正在重塑數位創造力,並為個
Thumbnail
基礎魔法,就是攻擊跟防禦; 像是Revit最根本的建模方法,就是[攻擊]內建模型中 那五個,[防禦]最後就是空心幾何裡面的五個,交互混搭而成。 主要建模就是快速 塑型的能力,之後再加上簡單程式碼去操控。 Blender就是,操控[點、線、面]建模,加上boolean混和應用。
Thumbnail
這篇要介紹AI生成影片的兩個方式:SVD 跟 AnimateDiff。
Thumbnail
VRM 的演進 為了讓 3D 虛擬人物能夠在不同平台和應用之間無縫使用,VRM Consortium 於 2018 年推出了 VRM (VRM 動畫) 格式。VRM 是一種開放的 3D 檔案格式,它基於 glTF 標準,具有良好的兼容性和可擴展性,自推出以來,得到了廣泛的認可和應用。