[筆記] 3D 模型駕駛艙再升級｜3tene 與 Sony Mocopi 的連結設定
文前碎碎念
前一陣子購入新的 Switch 體感遊戲，異想天開的把放在角落的 Mocopi 再拿出來，想說搭配作錄影測試後，這才想到自己似乎已經好一段時間沒有關注這個小玩意的發展，也沒有寫相關的內容了。
當初也是因為一直無法搞定裝置與電腦的連線，所以它才被我晾在一邊這麼久。
不過經過這次把玩，也才意外的注意到，之前所使用的 3D 模型操作軟體，居然已經默默的開始支援這個裝置啦！
剛好就來趁這個機會，做個簡單的設定筆記吧。
前情提要
如果有對這盒 Mocopi 馬卡龍還不熟悉的話，簡單來說，它就是一組由 Sony 推出的輕量型動作捕捉裝置。
只要依指定位置固定在身上，並連線手機 APP 之後，便能隨時記錄動作資訊，及時套用至 3D 人物模型上進行錄影，或是將動作資料串流至其他設備軟體中，有興趣的話，也可以參考我之前的開箱文。
在這次的軟體部份，因為我個人是 Win / Mac 兩棲使用者，所以之前筆記中的大多數流程，都會經過雙系統確認是否能通用。
而剛好這款 3tene 就是當初在測試時，少數能夠跨平台支援的 3D 選項之一。
當時只有使用到基本的網路攝影機追蹤，因此使用免費版本就能達成了，而這次既然要使用到進階功能⋯
就需要購買個人完整版本才能使用了。
添購駕駛艙
不過，不用看到要付錢就擔心退縮，可以先參考一下 3tene 官網 所提供的價目資訊。
根據表格（資訊為 2024.07.26 購入時擷取）可以看到，若只購買不含 Live2D 機能的 Pro 版本，個人使用價格為 3300 日圓，約台幣 711 元，而加購 Mocopi 追蹤功能也只要 1100 日圓，約台幣 237 元左右，其實還算可以接受。
若要進行購買的話，就必須先註冊帳號，點一下右上的「新規会員登録 / ログイン」就可以開始，也可以直接使用 Google 或是 Facebook 來註冊。
我在註冊跟登入時，有注意到其官方網站的重新導向似乎有出一些問題，在登入完畢後都會出現這樣的畫面。
這時候只要重新回到首頁，應該就可以看到已經是成功登入的狀態了。
接著就是購物時間啦，來到 3tene PRO 分頁下方，點下「個人向けパッケージ」方案。
接著會直接進到前面的價格表頁面，分別點這兩個買下它們。
付款管道部分，這裡有支援信用卡以及 Amazon Pay，這裡我是直接以信用卡做購買，點選「購入手続きに進む」之後就能輸入卡片資訊進行結帳。
付款成功後，應該就可以在信箱中收到訂單資訊，以及下載軟體的連結了。
以上，就成功入手所需的軟體工具啦！
接著就進到設定環節，這裡是以 M1 處理器 Mac mini 做為操作範例，Windows 方面應該也是相似步驟。
駕駛艙準備
完成購買後的當下，其實就已經可以從官方給的連結中下載軟體了。
而這裡我們需要把本體，跟另外購買的 Mocopi 接收工具都載下來分別解壓縮。
開啟資料夾後，可以發現到這兩者本身就是獨立的兩個程式，也難怪要拆成兩份來販售，不過在使用時也還是要兩者一起啟動才行。
而如果是在 Mac 上首次啟動的話，有可能會遇到像這樣的警告視窗而無法開啟程式。
這時候只要到「系統設定」>「隱私權與安全性」，從右邊找到 3tene 相關訊息，並按下「強制打開」。
接著再開的話，就可以看到彈出視窗「打開」的選項出現了。
這樣就能順利開啟了，那麼接著就來記錄一下設定的步驟。
系統資訊
首先來確認一下目前手邊的軟硬體環境，以下提供這次範例使用的作為參考。
- M1 Mac mini（8GB RAM）
- macOS Sonoma 14.5
- 駕駛艙版本 3tenePRO V4
- Mocopi 以 iPhone 串接
- Wifi 使用另一隻手機熱點分享，並讓電腦與 iPhone 同時連線
模型匯入
雖然不知道是不是因為電腦上，還留有前一個免費版本的關係，系統似乎自動把我的部分設定，包含已匯入的模型給自動帶入了。
但為了流程完整性，還是稍微來提一下模型的匯入過程。
- 首先從畫面最左側灰底選單中，選擇第四項，開啟頭像視窗。
- 這裡應該有一個預設角色，接著就按下左邊灰色的頭像。
- 在檔案選擇中選取自己的 VRM 格式模型。
- 匯入後會跳出該模型的使用規範，同意後即可使用。
完成後就可以在列表裡看到自己的模型，要切換的話，也只要點一下頭像就可以了。
跨次元媒介
接著就是要調整模型動作的接收方式啦，這次我們主要會使用一般網路攝影機來截取臉部表情，並搭配額外加購的 3tene Mocopi 接收工具來做動作捕捉。
首先點到右側第二個控制器圖樣，開啟頭像設定視窗，上方切到「裝置」分頁，並確認以下來擷取來源的設定。
- 臉部追蹤方式：攝像頭
- 身體追蹤類型：運動應用合作
接著下方的項目，就是根據自己的硬體進行更改即可，主要是確定攝影鏡頭，以及如果「脣形同步」設定為「聲音」的話，就進行麥克風選擇。
最後最下方的運動應用合作，應該就是兩個軟體間的溝通方式，目前測試是可以先放著不用修改。
而從這裡也可以看到，它其實還有支援其他像是 Kinect 等動作捕捉設備，只是它將 Mocopi 的支援軟體獨立推出販售。
動作傳輸
再來就是準備 Mocopi 的連接了，首先開啟 3teneMoApp Mocopi 這個額外購買的程式。
這裡基本只要做一些系統資訊的確認，不須做太多設定，先點下右方的齒輪開啟設定視窗，接著至「Mocopi」分頁記下連接的 Port。
再來至最右方「信息」分頁，在最下面找到電腦的 IP 位置，同樣先記下來。
最後轉身拿起您的手機，或是任何當初安裝 Mocopi APP 與配對感應器的裝置，確認他連到與電腦相同的 Wifi。
開啟 Mocopi APP 進行連線與校準後，照下圖指示，依序執行步驟。
- 上方切換為「Motion」
- 輸出切換為「Send」
如果模式正確，下方「3」處按鈕應該會是綠色，按下後就會跳出小視窗，這時剛剛記下的 Port 跟 IP 就派上用場啦！
依照視窗中的指示輸入按下 OK，這時應該就開始連線了。
回到電腦，點下右側選單最上方頭像，切成綠色，若角色有開始跟著 Mocopi APP 的預覽一起移動，就代表連線成功了。
串一串好上鏡
接著就是最後一部分，回到 3tene 主程式，同樣點下右上方叫出控制面板。
接著將「頭像1」的三個追蹤都啟動，如果模型有確實跟著你的動作移動的話，駕駛艙設置就大功告成啦！
攝影開拍
如果想將畫面擷取至 OBS 的話，在 Windows 上可以直接使用 Virtual Camera 的方式，在場景中新增 3tene 為視訊裝置就可以了。
但遺憾的是，Mac 上似乎不支援這樣的方式，僅能透過 NDI 或是視窗擷取來抓取畫面。
關於 NDI 擷取，可以先參考先前紀錄的這篇文章，不過由於我在測試時發現，透過 NDI 擷取雖然能夠支援內建的透明背景，但不知為何動作延遲十分嚴重，因此這裡就再提一下使用單純視窗擷取的步驟。
首先先至 3tene 主程式，左側選單找到背景設置，並在上方「變更背景」選擇成「自訂顏色」。
這裡請根據自己角色的配色，選擇較適合進行去背的背景色，像我這以綠色為主，便選擇藍幕作背景色。
接著回到 OBS 新增視窗擷取，並選擇 3tene 作為來源，儲存後，就能在場景中看到視窗畫面了。
接著在剛剛新增的視窗項目按下右鍵，並選擇「濾鏡」設定。
下方「+」中選擇新增「色彩鍵」，接著就能在視窗中慢慢調整去背程度。
這裡如果選擇的是常見的綠幕、藍幕、紅幕的話，可以直接在「關鍵顏色類型」選擇後再微調即可。
回到場景中，確認一下去背的狀況。
左右晃晃看一下順暢程度，如果沒問題就大功告成拉！
以上，基本就是這次的紀錄。
補充事項
在設定完後，我有稍微測試了一小段時間，也有觀察到一些要額外注意的小地方。
角色移位
在過程中還是需要常去注意模型是否有位移出視窗，需要去做再校正。
不知道不是因為硬體本身的問題，畢竟 Mocopi 是只有綁在身上的感應器，並沒有環境定位的輔助，因此在最初單以手機 APP 做擷取時，也有注意到相似的狀況。
手機中繼
由於 Mocopi 的動作資料，是經由手機蒐集後，再經由 Wifi 串流至電腦的。
因此在擷取過程中，除確保連線品質外，手機也盡量不要進到待機，或把 APP 放到後台，不然動作會開始出現嚴重的延遲。
動作傳輸時，螢幕會自動調黑
不過相對的，雖然 APP 在放著一陣子之後就會調暗螢幕，但還是要注意發熱的情況。
結語
其實這次，應該也沒有特別需要說的，畢竟就只是一個單純的軟體操作紀錄。
除了幫助自己這個常科技水逆，需要重設系統的廢物記憶相關步驟之外，也希望能為有需要的朋友提供一些資訊囉。
那麼，就祝福有需要的朋友們，都能順利進入 3D 世界啦！
《全文。終了》
你可能也想看
