更新於 2023/01/28閱讀時間約 6 分鐘

[筆記] 二滴用膩,就多加一滴吧!| VRoid Studio 人物 3D 化紀錄

文前碎碎唸

之前因為某些原因,開始研究有關 VTuber 直播以及 Live2D 的製作,雖然不到全面,但也是寫了不少相關紀錄下來。
不過,有些時候平面 2D 用久了,總是會有想往 3D 立體化發展的慾望,畢竟有些東西要立體一些比較好看,再加上近期身邊也有人有相關的需求⋯

不如就藉此機會來紀錄一下過程吧!

模組準備

首先要進行 3D 化,當然就必須有一個 3D 模組才行。
而要將原本設計的人物 3D 化的方案,其實非常多樣,進階一點的玩家,可以利用 Blender 這類建模軟體來製作。
不過,如果想要快速完成,或是像我這樣,技術還沒那麼純熟的朋友,就可以考慮使用其他的簡易製作工具,像是接下來作為範例的這套 VRoid Studio。
VRoid Studio 是一套由創作平台 Pixiv 推出的免費 3D 人物模組製作工具,可以快速捏出自己想要的角色外觀,並輸出成模組匯到其他軟體中使用,可以在 Steam 上面取得,或是直接到官網上下載。
打開軟體後的介面十分簡單,直接按圖中的「+」即可新增。
一開始會有兩種基礎體型可以選擇,選擇最接近需求的即可,後續在編輯器中都可以調整。
基本的編輯器畫面就是這樣,除了內建的素材可以直接做搭配之外,也可以自己匯入元件來使用。
可以調出像妖精的耳朵或甚至直接隱藏掉
每個小部位也都有提供一些細部選項可以做調整,自由度頗高,但操作並不複雜,初學者也可以像是紙娃娃一樣捏出自己的角色來。
另外值得一提的是,在配件區裡,除了眼鏡之外,還有特別準備獸耳的選項可以直接搭配,著實是獸耳角色的一大福音。
雖然只有貓耳跟兔耳可以選擇,但比起當初 Beta 版,還要慢慢用頭髮工具繪製的時期,已經方便許多了。
調整完成後,就可以準備將模型匯出,在介面右上角按一下匯出圖示,並選擇「Export as VRM」
接著輸入作者、版權、使用限制等相關資訊,按下「Export」後,就可以將人物匯出成其他軟體可用的 VRM 3D 模型了。

駕駛艙準備

有了模組之後,接著就是要讓它動起來囉!
由於這次使用的是 3D 模型,之前操作 Live2D 模型使用的 VTube Studio 並不適用,因此只能另尋工具。
目前我個人有測試過,可操作 3D 模組的臉部辨識軟體有Animaze3tene以及Wakaru三款。
其中「Wakaru」為台灣獨立製作的免費工具,但由於是 Beta 版本,目前效果也不盡理想,因此暫不敘述。
三款工具中,只有「3tene」能夠於 MacOS 上運作,但它的辨識及追蹤能力差強人意,經常於臉部轉向時會失效
「Animaze」是三者中辨識效果最好的,因此接下來會直接使用這款為例進行說明。
Animaze 是由 Holotech Studios 所推出的,為團隊先前推出的臉部追蹤工具 FaceRig 的進階版本,基本使用為免費,亦有提供訂閱解鎖的額外功能。
點到左側工具欄中可以看到,其本身就有內建許多人物模組、背景、特效等可以使用,但部分還是會需要透過金幣來解鎖。
而在人物選單中,往下滑到「我的頭像」後,按一下第一個「+」符號,即可選擇自己製作的人物模組進行匯入。
在攝影機部分,除了一般的 Webcam 之外,Animaze 也有支援使用 iPhone 的 FaceID 模組進行臉部追蹤的選項。
其優點是,由於 iPhone 是使用 3D 追蹤,因此精準度較高,但相對的,在使用手機追蹤的期間,螢幕必須一直維持開啟狀態,機身也容易發熱,因此在使用上需要稍作斟酌。
等到調整完成後,就可以戳一下視窗下方的大按鈕啟動虛擬相機,駕駛艙的部分就暫時告一段落囉~

攝影棚準備

最後就是將人物搬上攝影棚啦,這裡的步驟其實跟其他 OBS 直播的準備大同小異。
直接在場景中新增一個視訊擷取裝置。
然後在裝置中選擇「Animaze Virtual Camera」就可以截取到畫面了。
由於這裡使用的是免費版,因此可以看到畫面中,會出現一個在四個角落輪流跑的浮水印
不過,由於使用的是虛擬相機,截取到的畫面會包含原本 Animaze 的背景,因此會需要再做一個去背的步驟
這裡要在擷取裝置的「屬性」中,新增一個「色彩鍵」
選取背景顏色,微調相似性後,就可以完成去背了。
在這個步驟中,比較要注意的是原本 Animaze 中的背景顏色選擇,不能與你角色的主要色系太過相近
像是我自己人設整體皆為綠色,因此不適合選擇綠幕作為去背背景,不然容易將主體的顏色一併去除

完工之前

基本上,以上步驟都完成後,就可以直接開始進行錄影或直播了。
不過這裡還是要記錄一下,之前在幫忙設定環境的時候,所遇到的一件詭異的事情。

攝影機之亂
之前在安裝完 OBS 及 Animaze 兩套軟體後,不知道哪裡出現問題,導致 Animaze 完全抓不到攝影機
而 OBS 方面,也是只要一新增視訊裝置就會完全當機
網路上查到可能的解法,包括重新安裝、更新驅動、更換鏡頭等,都已經試過,皆無改善。
但就在無計可施之際,我將之前用來測試用的另外幾套臉部追蹤工具,包含 VTube Studio、3tene 都移除後,居然就莫名解決了!?
只能猜,或許是三套同性質的軟體感情不和打起來了吧(X)

結語
雖然不是大家都會遇到的問題,像是我在另一台電腦上就完全正常,但還是將解決方案一併紀錄,給有需要的人參考吧。
後續如果有試用其他追蹤軟體的話,也會再做補充,尤其是可以跨到 Mac 使用的 XD。

最後,不論看到這裡的各位,是想要直播、錄影、視訊,或單純只是路過,都祝福你們能夠一切順利啦!

VTuber 研究相關系列

《全文。終了》

分享至
成為作者繼續創作的動力吧!
© 2024 vocus All rights reserved.