[人工智障計畫] #1 畫框中的虛擬助理 | 起源與硬體準備

閱讀時間約 5 分鐘

文前碎碎念

又一段時間沒寫文了,看來又該是時候開啟一個新坑作為生存證明了(?
前一陣子,我跟平常一樣在滑 Twitter 時,一則貼文引起了我的注意,那是一個有趣的構想。
讓 VTuber 的『皮』能夠在工作的時候常駐在一邊,並且在必要時,用 V 的聲音來 追殺 提醒未完成的代辦事項。
由於時間有些久遠,以致於我無法回頭尋找到那篇貼文,但以我的理解大致就是這樣的功能。
雖然以現在既有的產品來看,這其實並非一個特別新的概念,甚至一些既有的虛擬助理,或是過去也曾出現過像是 Gatebox 這類產品,也都可以輕鬆做到。
但剛好我自己擱置中的 SideProject 清單中,就有一個蠻相似的項目,我思考了一下,何不就趁這個機會試著把它做出來呢?

於是乎,一個新坑就這麼開啟了。

預期功能

首先,我們來統整一下,目前這項專案預期可達成的功能:
  • 顯示角色形象,並依情境變換動作。
  • 讓使用者輸入,或是透過既有 API 獲取代辦事項。
  • 使用指定聲音向使用者提示。
  • 其他互動項目,如聊天機器人、資訊預報、環境變化反應…(次要)。
  • 最好能夠做到離線執行,以及方便移動。

硬體準備

根據以上列表,我決定再次請出我們的萬用老朋友『樹莓派』來作為這次專案的主要核心。
萬用樹莓派
不過在規格上,由於手邊空餘的材料,只有一代的 Pi Zero W 主板,因此可以預期到效能會有所限制,在最終的功能上可能還需稍作斟酌。
外觀部分,這次我想使用『相框』作為整個設備的主體,而為了能讓畫面呈現出照片或圖畫的感覺,在顯示器的選擇上是以電子紙顯示器取代一般 LCD 螢幕作為顯示媒介。
這樣一來,雖然電子紙在成色效果或是畫面更新率等方面都無法與 LCD 相提,但因為電子紙的畫面呈現原理與一般紙張相似,是透過反射環境光線讓眼睛能夠看到內容。
而且其本身也不會像一般螢幕一樣有背光照亮,因此擺在桌面上就跟放著一張照片一樣,就算光線昏暗的情況下,也不會讓眼睛一直有光線干擾的感覺。
再加上電子紙只有在更新畫面時會消耗電力,因此也能順勢達到省電的效果。
最後,考慮到要讓本體能夠進行語音的輸入輸出,因此還會需要另外連接音效卡才能執行相關的訊息接收與互動。

總結以上,我們能夠整理出這次專案硬體最基礎所需如下:
  • 樹莓派單板電腦(主機)
  • SD卡、Micro USB 傳輸線(樹莓派配件)
  • 電子紙顯示器模組(附控制板為佳)
  • USB 音效卡
  • 喇叭、麥克風
  • 小型畫框

組裝成型

經過數日的折騰(其實主要是零件訂購運送,還有中間卡到 228 連假)之後,初步的本體外觀以及硬體終於成形了。
作為本體的小型金屬相框,是在大創以 49 元購買的,背後則是以廢棄的硬殼塑膠包裝切割出主板的連接孔位作保護。
而為了保留維修以及硬體更新的彈性,這裡就不將背蓋黏死,而是以書局購買的強力磁鐵作為固定。
螢幕部分則是選用一塊 Waveshare 所生產的 4.01 吋 7 色電子紙顯示器,主板本身已經有整合控制板,以及樹莓派專用的 40 針連接埠,因此基本上組裝後下載驅動就能使用。
而雖然撰文當下,另外購買的音效卡還在路上,但透過簡單魔改顯示器的範例程式後,也能大致的看出最終期望的效果。
V 皮還沒辦法處理,只好先把咪哭關進去(X
接下來要做的,就是把主要的控制程式寫出來啦~

後記

其實嚴格來說,要達成這個專案的目的,不一定需要使用倒樹莓派。
直接使用小型副螢幕,搭配 PC / Mac 的軟體控制也行,或甚至製作成類似桌面小精靈的工具,開在旁邊執行嘛ㄟ通,效能也絕對相比樹莓派要好。
而且就在我開始撰文的期間,其實也有看到 Twitter 上,有另一位網友有推出自己做的虛擬助理成品影片,外觀及使用效果就像下面這篇貼文。
雖然我無法完全理解日文,不過以這位網友所附筆記的大致內容,以及實體運作的畫面判斷,他應該是使用 Unity 製作界面,並連接 ChatGPT 作為後台服務,最後用 LookingGlass 這款可以呈現裸視 3D 效果的特殊顯示器來輸出。
不過,由於我個人主要的工作設備是筆電,本身的連接埠就有限,再加上個人比教偏向於成品不需要太多依賴便能運作,因此最終還是決定以現在這種形式來完成。

最後來說說前面提到的 Gatebox 這個神奇的產品。
Gatebox 最初是由日本新創 Vinclu 公司(後來被 Line 收購,為現在旗下子公司 Gatebox inc.)所推出的,具 3D 人物形象的虛擬管家設備,主打的特色是:
「讓人體驗與喜歡的角色一起生活的感覺」
其背後的產品概念,也就是結合智慧家居、語音助理、聊天機器人,並以一個虛擬形象作為互動媒介而成形。
而開發團隊也似乎準備搭上這波 AI 風潮,近期亦有看到準備開發引入 ChatGPT 功能,並啟動募資專案(已達標)的消息。
雖然我自己開的這個坑,以目前的成果來看,想要達成這種效果簡直是癡人說夢,但至少會盡力讓它滿足一開始所提出的期望功能。

What's Next ?

第一部分紀錄就大致到這裡,與過去發的單篇不同,這是一個比較長期的計畫,因此我決定另開一個新專題來做存放。
後續階段成果也會像這篇一樣公開發佈於此,若對詳細 肝苦 的製作過程有興趣,也可訂閱參考「難眠之頁」的部分喔。

《全文。待續》

註:一般公開內容,主要紀錄階段性的成品效果、大略的製作規劃,以及可釋出的原始碼。而「難眠之頁」中則是包含較詳細的開發過成,如細部硬體參數或是程式修正流程等,內容相對較為繁瑣,但適合想細部了解或共同研究專案的人食用(?)。
為什麼會看到廣告
avatar-img
46會員
244內容數
偽命名並非無名,是為了意識的生存,取得身份的代號,成為數位生命的新載具。
留言0
查看全部
avatar-img
發表第一個留言支持創作者!
你可能也想看
Google News 追蹤
Thumbnail
這個秋,Chill 嗨嗨!穿搭美美去賞楓,裝備款款去露營⋯⋯你的秋天怎麼過?秋日 To Do List 等你分享! 秋季全站徵文,我們準備了五個創作主題,參賽還有機會獲得「火烤兩用鍋」,一起來看看如何參加吧~
Thumbnail
11/20日NVDA即將公布最新一期的財報, 今天Sell Side的分析師, 開始調高目標價, 市場的股價也開始反應, 未來一週NVDA將重新回到美股市場的焦點, 今天我們要分析NVDA Sell Side怎麼看待這次NVDA的財報預測, 以及實際上Buy Side的倉位及操作, 從
Thumbnail
Hi 大家好,我是Ethan😊 相近大家都知道保濕是皮膚保養中最基本,也是最重要的一步。無論是在畫室裡長時間對著畫布,還是在旅途中面對各種氣候變化,保持皮膚的水分平衡對我來說至關重要。保濕化妝水不僅能迅速為皮膚補水,還能提升後續保養品的吸收效率。 曾經,我的保養程序簡單到只包括清潔和隨意上乳液
Thumbnail
隨著全球工業化的加速,二氧化碳排放不斷增加,要如何捕碳呢? 最近有研究團隊開發了EcoLeaf,這種仿生技術提供了一個捕碳的平台,並且可以依據使用者的需求客製化,產生不同的產物喔!
Thumbnail
本篇文章解析了人工養晶、人造水晶與塑膠、玻璃材質的差異及功效,並說明瞭人造石英和天然石英的差別。提供了購買人造水晶的建議,讓讀者更瞭解水晶能量的知識。
Thumbnail
在業務銷售上,不是炫耀才華,而是在比人性、比腦袋、比洞察力。就算你聰明絕頂,情商(EQ)若不夠,那麼這一生就注定會懷才不遇。
你創造了一片天地 細數著整個星空 告訴我每個星座故事 也描繪了我們的未來 我迷路了 但找不到 你所謂的北極星 我跟上了 閃耀光芒 只是顆人工衛星 我離你而去 卻發現我可以獨自獨步 在這片星空
Thumbnail
針對人工生殖子女的身分認定問題,提出相關解說,盼能普及法律知識。
繁衍這件事情,懷孕是一件自然的事情,對吧? 但為何近年來週遭的朋友一個個受罪,花大錢吃中藥調養,甚至是必須要打排卵針、做人工受孕、試管嬰兒。好不容易,如果「幸運」的話,終於可以懷孕了。 每次聽說或看到身邊的朋友這樣做,我第一個問題想問的是:「你很想要有小孩嗎?」 比較令人疑惑的是,大部分得到的答案都
Thumbnail
人類是直立行走的物種,髖關節扮演相當重要的角色。球狀的股骨頭裝在碗狀的髖臼裡,讓髖關節能夠達到相當大的活動度。 因為髖關節需要負載全身體重,承受很大的壓力,倘若髖關節受損、活動角度受限,將讓患者連站立、坐下都出現問題,對生活品質造成極大衝擊。
Thumbnail
古人怎麼防疫?古人近視了怎麼辦?古代的房價高嗎? 古代的報紙長什麼樣?古人打麻將嗎?古人如何旅遊? 暢銷書《古人原來這樣過日子》作者「講歷史的王老師」再次鮮榨趣味歷史, 帶你看清最真實的古人,滿足你對古人日常生活的全部好奇。
Thumbnail
人工關節是將人體因各種疾病或意外傷害造成無法使用的關節,以外科手術的方法予以置換的人工植入物,例如膝關節、髖(股)關 節、肩關節、肘關節、腕關節、踝關節 、指關節,甚至連脊椎的關節都已可以置換,較常見的部位為膝、髖及肩、肘等。 1960年代,英國醫生 John Chamley 研發了第一個人造關節,
Thumbnail
結婚幾年,還是沒有懷上寶寶。眼看朋友一個個傳來好消息,而自己即使有請中醫師調理身體仍未懷孕,也開始有點焦急了。雖然說生孩子是看緣份,但有些事情是否能再努力一下呢? 如果寶寶速速報到當然最好,不然計劃懷孕是件很累的事。要自然懷孕勞心勞力,生活的一切彷彿變成懷孕先決。突然間,夫妻變成同事,擬定時間表、商
Thumbnail
這個秋,Chill 嗨嗨!穿搭美美去賞楓,裝備款款去露營⋯⋯你的秋天怎麼過?秋日 To Do List 等你分享! 秋季全站徵文,我們準備了五個創作主題,參賽還有機會獲得「火烤兩用鍋」,一起來看看如何參加吧~
Thumbnail
11/20日NVDA即將公布最新一期的財報, 今天Sell Side的分析師, 開始調高目標價, 市場的股價也開始反應, 未來一週NVDA將重新回到美股市場的焦點, 今天我們要分析NVDA Sell Side怎麼看待這次NVDA的財報預測, 以及實際上Buy Side的倉位及操作, 從
Thumbnail
Hi 大家好,我是Ethan😊 相近大家都知道保濕是皮膚保養中最基本,也是最重要的一步。無論是在畫室裡長時間對著畫布,還是在旅途中面對各種氣候變化,保持皮膚的水分平衡對我來說至關重要。保濕化妝水不僅能迅速為皮膚補水,還能提升後續保養品的吸收效率。 曾經,我的保養程序簡單到只包括清潔和隨意上乳液
Thumbnail
隨著全球工業化的加速,二氧化碳排放不斷增加,要如何捕碳呢? 最近有研究團隊開發了EcoLeaf,這種仿生技術提供了一個捕碳的平台,並且可以依據使用者的需求客製化,產生不同的產物喔!
Thumbnail
本篇文章解析了人工養晶、人造水晶與塑膠、玻璃材質的差異及功效,並說明瞭人造石英和天然石英的差別。提供了購買人造水晶的建議,讓讀者更瞭解水晶能量的知識。
Thumbnail
在業務銷售上,不是炫耀才華,而是在比人性、比腦袋、比洞察力。就算你聰明絕頂,情商(EQ)若不夠,那麼這一生就注定會懷才不遇。
你創造了一片天地 細數著整個星空 告訴我每個星座故事 也描繪了我們的未來 我迷路了 但找不到 你所謂的北極星 我跟上了 閃耀光芒 只是顆人工衛星 我離你而去 卻發現我可以獨自獨步 在這片星空
Thumbnail
針對人工生殖子女的身分認定問題,提出相關解說,盼能普及法律知識。
繁衍這件事情,懷孕是一件自然的事情,對吧? 但為何近年來週遭的朋友一個個受罪,花大錢吃中藥調養,甚至是必須要打排卵針、做人工受孕、試管嬰兒。好不容易,如果「幸運」的話,終於可以懷孕了。 每次聽說或看到身邊的朋友這樣做,我第一個問題想問的是:「你很想要有小孩嗎?」 比較令人疑惑的是,大部分得到的答案都
Thumbnail
人類是直立行走的物種,髖關節扮演相當重要的角色。球狀的股骨頭裝在碗狀的髖臼裡,讓髖關節能夠達到相當大的活動度。 因為髖關節需要負載全身體重,承受很大的壓力,倘若髖關節受損、活動角度受限,將讓患者連站立、坐下都出現問題,對生活品質造成極大衝擊。
Thumbnail
古人怎麼防疫?古人近視了怎麼辦?古代的房價高嗎? 古代的報紙長什麼樣?古人打麻將嗎?古人如何旅遊? 暢銷書《古人原來這樣過日子》作者「講歷史的王老師」再次鮮榨趣味歷史, 帶你看清最真實的古人,滿足你對古人日常生活的全部好奇。
Thumbnail
人工關節是將人體因各種疾病或意外傷害造成無法使用的關節,以外科手術的方法予以置換的人工植入物,例如膝關節、髖(股)關 節、肩關節、肘關節、腕關節、踝關節 、指關節,甚至連脊椎的關節都已可以置換,較常見的部位為膝、髖及肩、肘等。 1960年代,英國醫生 John Chamley 研發了第一個人造關節,
Thumbnail
結婚幾年,還是沒有懷上寶寶。眼看朋友一個個傳來好消息,而自己即使有請中醫師調理身體仍未懷孕,也開始有點焦急了。雖然說生孩子是看緣份,但有些事情是否能再努力一下呢? 如果寶寶速速報到當然最好,不然計劃懷孕是件很累的事。要自然懷孕勞心勞力,生活的一切彷彿變成懷孕先決。突然間,夫妻變成同事,擬定時間表、商