方格精選

第239話:爆發吧小宇宙!讓視障者行動自如的 AI 背包

閱讀時間約 4 分鐘
左:人稱「最接近神的男人」,最強的黃金聖鬥士沙迦,老是閉著眼睛(ⓒ車田正美/集英社);右:進行原力特訓中的天行者(ⓒGeorge Lukas/Lucasfilm/Disney)
有了這個背包,讓你擁有原力,小宇宙爆發!
2021年3月24日,INTEL發佈了一個「AI輔助視障者背包」的概念設計。這個設計的推手是喬治亞大學的電腦視覺與人工智慧專家Jagadish K. Mahendran。他回憶當初開始構思這個產品的起點:2013年當他還在碩士班時,論文題目是應用在機器人的電腦視覺研究,有一天他跟一位朋友碰面—這位朋友是個視障者—聊天時,他突然想到:「我整天想要讓機器人『看得到』,但是世界上還有這麼多人類因為看不到而過著極為不便的生活,這不是本末倒置嗎?」於是就開始了給人類的「視覺輔助系統」的研究。
這幾年由於人工智慧技術的急速發展,讓這項工作也得到了突破。這套系統說起來也很簡單,包括了三個部分:一個背包、一個腰包以及一件背心。
這個行人視覺輔助系統使用的樣子,圖中示範的即為開發者Jagadish K. Mahendran(來源:INTEL)
背包:內有中控電腦(可以是筆電或是樹莓派)以及GPS定位系統,還可以再塞一些電池。
背心:搭載OAK-D視覺套件,OAK是「OpenCV AI Kit」(使用OpenCV 的人工智慧套件),配備有解析度4K的攝影機,而且能判別物體在影像中的深度(也就是物體到攝影機的距離),OAK-D的D指的就是深度 depth。這是一個所謂的「邊緣AI」裝置,不是裝了會讓你變邊緣人,而是有別於以前感測器(如相機)取得的資料(如影像)要傳送回電腦主機進行集中處理,做出判斷並且發出指令做出反應,但是這麼做的缺點是資料傳輸需要時間,而且可能同時很多個感測器都傳資料回來叫中央處理器算的話就需要排隊,如此一來可能造成反應延遲。隨著晶片功能越來越強大,直接在感測器上面搭載適合的處理器,這個處理器不必像電腦的CPU一樣什麼東西都能算,只要專門處理那個感測器的資料就行了,例如OAK-D上面的處理器就叫做VPU(visual processing unit,視覺處理單元),其他用不到的功能通通拿掉。將影像訊號直接在OAK-D上處理完後,直接把分析完畢的資料(而非整個影像資料,所以資料量小很多)傳回中控電腦。
腰包:放電池,也可以再放一套OAK-D。
核心元件OAK-D視覺感應套件(來源:. Luxonis)
最重要的部分當然是讓整個系統「學會」行人走在路上可能碰到的各種狀況:路面高低差、障礙物、其他移動物如車輛、其他行人、動物等等,說穿了其實跟訓練自駕車的基本邏輯差不多,只是汽車跟行人會碰到的情境不太一樣,而且對行人來說,還有「室內」與「戶外」之分。事實上,在「戶外」的部分,這個系統其實也借用了不少自駕車的訓練資料,調整後給行人使用。
讀者看到這裡,可能會覺得「阿這不就自駕車系統的劣化版」,行人走得那麼慢,一定很簡單啦!
其實不然,這個系統和自駕車不同之處,可能也是最大的困難是:自駕車感測器從收到訊號到分析、判斷、反應,一路上都是機器,但是對這個行人系統來說,訊號分析完是送給「人類」使用者,然後由使用者判斷後用自己的身體做出反應。因此,這個系統的「資訊流」必須受到嚴格控管,依據其重要性與緊急程度以人類可以處理的速度,用語音的方式傳送給使用者,否則使用者可能被「資訊的洪水」所淹沒而手忙腳亂。所以如何在極為有限的資訊流量限制之下,讓使用者能安全、正確的達到目的地,是一大挑戰。
INTEL這套系統可以做到讓視障者:
  1. 安全的在人行道上行走
  2. 避開各種障礙,包括從地上的物體、垂下來的樹枝、其他行人
  3. 所有路上的交通標誌的訊息
  4. 正確辨識路口、以停止等候及穿越馬路
  5. 正確辨識路面的高低差
  6. 像路克天行者班閉上眼睛也能使用光劍戰鬥
  7. 使阿賴耶識覺醒,小宇宙爆發,跟處女座的沙迦一樣
啊 6, 7 的功能現在的版本還沒有啦,希望 2.0 版就能開發出來…
  • 超中二物理宅雜記
  • 等我征服世界就把電腦視覺列為全人類必修(糟糕偏離物理軌道了)
  • 生命宇宙與萬事萬物什麼都馬跟物理有關
  • 話都給我講就好 其之239
為什麼會看到廣告
157會員
149內容數
以中二魂介紹最新的科學與科技發展,幫你讀剛出爐的最新學術期刊論文,若宅味過重敬請原諒!
留言0
查看全部
發表第一個留言支持創作者!
如果大家在上下班尖峰時間到「台灣第一魔界迷宮」的台北火車站(或者是世界上任何一個大都市的大車站),會看到密密麻麻的人萬頭鑽動,有觸發密集恐懼症的危險。這種大車站四面八方都有通路與出口,每個人都有自己想去的方向,到底大家是怎麼移動的呢?如果有人邊走邊玩手機,會發生什麼事?
是鳥?是飛機?是超人?是「宇宙戰艦」?是「海市蜃樓」?還是只是單純看錯...
這就是「科學傳播的憂鬱」。因為對於科學來說,「事實」與「數據」優先於「故事性」。
物理學家史蒂芬‧霍金,因罹患漸凍人症,做了氣切手術無法說話,所以得靠語音輔助系統與別人溝通,必須一個字母一個字母輸入,然後合成語音,這種方式講話超慢,大約每分鐘只能講十個字,2019年的研究,利用腦波直接轉為聲波的方式,可以達到正常講話的速度,每分鐘約150個字。
疫情期間,民眾對於公共衛生的關注程度是前所未有的高,照理說應該是推廣公衛知識的大好時機,但是真的做起來為什麼這麼難? 有一個很重要的原因是「敘事」。
豬在人類眼中的「社會形象」有點分歧,在某些作品中又肥又髒又蠢,在其他作品中卻是聰明又愛乾淨。BBC 於 2月11日報導了一個新研究,顯示豬應該算是滿聰明的,因為科學家證明了豬是會打電動的...
如果大家在上下班尖峰時間到「台灣第一魔界迷宮」的台北火車站(或者是世界上任何一個大都市的大車站),會看到密密麻麻的人萬頭鑽動,有觸發密集恐懼症的危險。這種大車站四面八方都有通路與出口,每個人都有自己想去的方向,到底大家是怎麼移動的呢?如果有人邊走邊玩手機,會發生什麼事?
是鳥?是飛機?是超人?是「宇宙戰艦」?是「海市蜃樓」?還是只是單純看錯...
這就是「科學傳播的憂鬱」。因為對於科學來說,「事實」與「數據」優先於「故事性」。
物理學家史蒂芬‧霍金,因罹患漸凍人症,做了氣切手術無法說話,所以得靠語音輔助系統與別人溝通,必須一個字母一個字母輸入,然後合成語音,這種方式講話超慢,大約每分鐘只能講十個字,2019年的研究,利用腦波直接轉為聲波的方式,可以達到正常講話的速度,每分鐘約150個字。
疫情期間,民眾對於公共衛生的關注程度是前所未有的高,照理說應該是推廣公衛知識的大好時機,但是真的做起來為什麼這麼難? 有一個很重要的原因是「敘事」。
豬在人類眼中的「社會形象」有點分歧,在某些作品中又肥又髒又蠢,在其他作品中卻是聰明又愛乾淨。BBC 於 2月11日報導了一個新研究,顯示豬應該算是滿聰明的,因為科學家證明了豬是會打電動的...
你可能也想看
Google News 追蹤
Thumbnail
這個秋,Chill 嗨嗨!穿搭美美去賞楓,裝備款款去露營⋯⋯你的秋天怎麼過?秋日 To Do List 等你分享! 秋季全站徵文,我們準備了五個創作主題,參賽還有機會獲得「火烤兩用鍋」,一起來看看如何參加吧~
Thumbnail
前言 小編最近看了Youtuber飽妮的影片〈安海瑟薇討人厭的真正原因。〉頗有感觸。本葉將根據該集影片討論作為延伸,有興趣歡迎自行服用。 先談重點,女性的情緒價值,是社會期待 目前大多數的社會,對男女的社會期待還是有那麼一點相似。年紀會變,環境會變,人會變。但社會要變,可能要好多世代。 不同
Thumbnail
簡介 隨著手遊市場的飛速發展,玩家對於遊戲內購的需求與日俱增。然而,官方儲值方式往往價格高昂且流程繁瑣,這使得玩家在享受遊戲樂趣的同時承受了不小的經濟壓力。帝國手遊代儲網作為一個專業的手遊代儲平台,以其便捷、安全和優惠的特點,迅速成為眾多玩家的首選。本文將對帝國手遊代儲網進行全面評測,探討其作為理
Thumbnail
「轟!轟!轟!轟⋯⋯」耳邊不斷傳來熱空氣傳輸到舟翼的巨大聲響。 端木磊從飛舟鳥頭的雙瞳圓窗往外瞧,遠處42.5仞高的金黃色大佛,在陽光底下顯得更加璀璨耀目⋯⋯
Thumbnail
睡到中午才被達美樂送披薩到樓下的電鈴聲喚醒, 是我昨晚預訂的三小披薩抵達現場等待收貨。 其中兩個是我身為螞蟻人最愛的草莓甜心珍珠披薩, 另外一個是外送買小送小可選的同價位披薩。 選擇披薩口味這件事對我來說比投資還難, 就妥妥是個人性考驗。
Thumbnail
#魔法系畫家第239天 #好好珍惜寶貴的畫家生活 最近魔法學校有個連續五天的密集課 所以我必須駐點待著 - 好久沒有一口氣工作這麼長時間 從7:50-17:40幾乎10小時 好像又感受了一次 之前上班的感覺 漫長的被迫待在一個空間瘋狂
Thumbnail
正與文沐雨對戰的玄慈也將自身的真元能量完全放開,手中的佛珠與降魔杵同樣是散發著令人驚駭的能量波動,兩人所處的地域當中,方圓十里之內漫天狂沙飛舞,大大小小的石頭與那些被真元能量切斷的大小樹幹等物體在兩人的真元影響之下朝著天空緩緩地漂浮了起來,好似她們的真元能量已經將四周的引力切斷了似的。
Thumbnail
我們在上一話中結束了民法總則編的介紹,在本週正式進入「債編」的介紹,在民法總則編中所規定的原則性內容可以適用在債、物、親屬及繼承等編的法律行為及法律狀態,而債編中所規定的內容則限定於「債」的行為與狀態。債編的法律條文很多,在初學習時難免會沒有方向感,先為各位讀者建立體系感,往後在學習時可以隨時
Thumbnail
在正式進入「法律行為」的內容之前,我們必須先瞭解權利變動的樣貌及種類,以鳥瞰民法運作的體系及概念!
Thumbnail
神經外科教授丹恩指出畫家莫內、雷諾爾、特嘉,還有塞尚、畢沙羅等都是近視眼,而他們都是十九世紀印象主義畫派的大師。丹恩說,一場被視為突破傳統、開創繪畫新局的印象主義,很可能就是這些近視眼「因緣際會」同時在巴黎現身,以類似的方式「觀看世界」造成的。
Thumbnail
「怎樣的行為會有我國刑法適用」的問題。舉例而言,如果印度人在台灣毆打馬來西亞人、義大利人在台灣吸毒、法國人在冰島用電話詐欺方式騙在台灣的阿根廷人的錢,這些行為有很多涉外因素,那是不是同樣能有我國刑法的適用?還是只能交給各國自行解決?這些問題,就是我國刑法適用範圍的問題。
Thumbnail
這個秋,Chill 嗨嗨!穿搭美美去賞楓,裝備款款去露營⋯⋯你的秋天怎麼過?秋日 To Do List 等你分享! 秋季全站徵文,我們準備了五個創作主題,參賽還有機會獲得「火烤兩用鍋」,一起來看看如何參加吧~
Thumbnail
前言 小編最近看了Youtuber飽妮的影片〈安海瑟薇討人厭的真正原因。〉頗有感觸。本葉將根據該集影片討論作為延伸,有興趣歡迎自行服用。 先談重點,女性的情緒價值,是社會期待 目前大多數的社會,對男女的社會期待還是有那麼一點相似。年紀會變,環境會變,人會變。但社會要變,可能要好多世代。 不同
Thumbnail
簡介 隨著手遊市場的飛速發展,玩家對於遊戲內購的需求與日俱增。然而,官方儲值方式往往價格高昂且流程繁瑣,這使得玩家在享受遊戲樂趣的同時承受了不小的經濟壓力。帝國手遊代儲網作為一個專業的手遊代儲平台,以其便捷、安全和優惠的特點,迅速成為眾多玩家的首選。本文將對帝國手遊代儲網進行全面評測,探討其作為理
Thumbnail
「轟!轟!轟!轟⋯⋯」耳邊不斷傳來熱空氣傳輸到舟翼的巨大聲響。 端木磊從飛舟鳥頭的雙瞳圓窗往外瞧,遠處42.5仞高的金黃色大佛,在陽光底下顯得更加璀璨耀目⋯⋯
Thumbnail
睡到中午才被達美樂送披薩到樓下的電鈴聲喚醒, 是我昨晚預訂的三小披薩抵達現場等待收貨。 其中兩個是我身為螞蟻人最愛的草莓甜心珍珠披薩, 另外一個是外送買小送小可選的同價位披薩。 選擇披薩口味這件事對我來說比投資還難, 就妥妥是個人性考驗。
Thumbnail
#魔法系畫家第239天 #好好珍惜寶貴的畫家生活 最近魔法學校有個連續五天的密集課 所以我必須駐點待著 - 好久沒有一口氣工作這麼長時間 從7:50-17:40幾乎10小時 好像又感受了一次 之前上班的感覺 漫長的被迫待在一個空間瘋狂
Thumbnail
正與文沐雨對戰的玄慈也將自身的真元能量完全放開,手中的佛珠與降魔杵同樣是散發著令人驚駭的能量波動,兩人所處的地域當中,方圓十里之內漫天狂沙飛舞,大大小小的石頭與那些被真元能量切斷的大小樹幹等物體在兩人的真元影響之下朝著天空緩緩地漂浮了起來,好似她們的真元能量已經將四周的引力切斷了似的。
Thumbnail
我們在上一話中結束了民法總則編的介紹,在本週正式進入「債編」的介紹,在民法總則編中所規定的原則性內容可以適用在債、物、親屬及繼承等編的法律行為及法律狀態,而債編中所規定的內容則限定於「債」的行為與狀態。債編的法律條文很多,在初學習時難免會沒有方向感,先為各位讀者建立體系感,往後在學習時可以隨時
Thumbnail
在正式進入「法律行為」的內容之前,我們必須先瞭解權利變動的樣貌及種類,以鳥瞰民法運作的體系及概念!
Thumbnail
神經外科教授丹恩指出畫家莫內、雷諾爾、特嘉,還有塞尚、畢沙羅等都是近視眼,而他們都是十九世紀印象主義畫派的大師。丹恩說,一場被視為突破傳統、開創繪畫新局的印象主義,很可能就是這些近視眼「因緣際會」同時在巴黎現身,以類似的方式「觀看世界」造成的。
Thumbnail
「怎樣的行為會有我國刑法適用」的問題。舉例而言,如果印度人在台灣毆打馬來西亞人、義大利人在台灣吸毒、法國人在冰島用電話詐欺方式騙在台灣的阿根廷人的錢,這些行為有很多涉外因素,那是不是同樣能有我國刑法的適用?還是只能交給各國自行解決?這些問題,就是我國刑法適用範圍的問題。