澳洲雪梨科技大學研發新一代視障聲學觸控系統

閱讀時間約 2 分鐘
raw-image




聲學觸控系統(Acoustic Touch)

聲學觸控系統是一種感官轉換系統,透過將視覺轉換成聲音,進而讓視障者可以感知外在世界。常見的系統包含,將文字轉成聲音的文本朗讀系統、例如倒車雷達般的障礙物警示系統等等。目前全世界有約2.5億多名視障者,聲學觸控系統將有助於視障者日常生活活動,例如找尋物品、行走辨識方向都會更為容易。


研究重點

來自澳洲雪梨科技大學的研究團隊改良既有的聲學觸控系統且提升其適用性,此研究成果已刊登在Plos One期刊。研究團隊利用市面上商用地擴增實境眼鏡(AR眼鏡),利用其前置鏡頭與AI物體辨識技術,辨識物體後,再以物體的聲音標誌來標示物體的所在。聲音標誌物體的特徵聲音,例如書本的特徵就是翻書聲。使用者在使用此系統時,會利用頭部的轉動來掃描周圍物品,當正臉對到物體時,就會響起聲音標誌。研究團隊招募了視障者、以及一般健康人但蒙住其眼睛來進行實驗。研究結果發現,視障者在使用聲學觸控系統時,其物體辨識率與直接給予聲音告知物體方向、以及由物體附近置放的喇叭發出聲音指示其位子的辨識效果相當。惟健康受試者在蒙住眼睛時,其聲學觸控辨識率與其他兩者方法相比較差,但仍可達到七成的辨識效果。這是因為健康受試者平常仰賴視覺提示,由身體方向來記憶空間位子的協調性較差。此實驗結果顯示,聲學觸控將可有效的協助視障者辨識周遭物體,未來將有望大幅提升視障者獨立生活的能力。


思考

這個研究有兩個可以探討的點。第一、此聲學觸控系統需仰賴受試者探詢空間、辨識物體聲音標誌與空間記憶的能力。因此相較直接給予指示物體位子或由物體所在位子發出聲音的方式,都要來的困難得多。然而實驗顯示,使用新聲學觸控的物體辨識率、物體辨識所需時間都沒有顯著差異。這或許是因為轉頭辨識方向是一個人類很自然的行為。通常人類在透過聲音辨識物體方向時,都會將頭轉向發出聲音的物體。儘管這個行為很符合直覺,但仍有兩位受試者無法在時間內完成訓練而失敗。第二、聲學觸控也仰賴AI辨識的準確度,因為倘若AI辨識系統的準確度不佳、或是可以辨識的物體有限,將會影響其可適性。目前實驗也僅測試四項物品,因此未來還需要進一步的擴充辨識品項,以增加實用性。


論文:

https://doi.org/10.1371/journal.pone.0290431


圖片來源:

擷取自論文中的影片,獲CC BY 4.0授權。


#神經科技

#視障輔助系統

#聲學觸控

#擴增實境眼鏡


都說千金難買早知道,大腦是我們最重要也最複雜的器官,你了解多少呢?本專題將持續關注神經科學的大小事,期望透過分享這些新聞、故事,讓神經科學走入大眾,而這些科技其實離我們不遙遠。歡迎各位訂閱與贊助。
留言0
查看全部
avatar-img
發表第一個留言支持創作者!
從日常生活經驗可以知道,我們特別喜歡高糖分與高油份的食物,例如深受大眾喜愛的珍奶與雞排。這些高糖高油的食物提供了我們特殊的「口感」與飲食體驗。食物中糖份的多寡可以由口腔中的糖份受器感知,然而,油份的多寡是如何透過口腔感測而得的,則尚不明瞭。此文將帶您一起解惑。
過去,科學家認為人類在持續睡眠過程中,普遍不會接受外界刺激並因此而做出反應。這種持續睡眠過程中的反應,需要與一般日常生活中的因鬧鐘或警鈴而做出的反應區隔開來,因為這時候人類其實已經被喚醒,而非持續的睡眠過程。那麼人類到底是否有能力在持續睡眠中,對外界刺激反應呢? 請閱讀此文。
來自澳洲昆士蘭大學的研究團隊,近期於Imaging Neuroscience期刊(前NeuroImage編輯團隊設立之期刊),發表將DIANA序列應用於人腦之可行性,其中DIANA序列能透過磁振造影直接顯示神經活動。此文將簡述此研究成果。
神經科技新創公司Precision Neuroscience,近期收購一間微機電工廠,期望購透此次收購能提升其旗下大腦電極的製造效能與品質。
阿茲海默症與其病理 在阿茲海默症患者中,腦類神經元多可發現類澱粉蛋白的沉積,因此類澱粉蛋白斑塊的形成,一直被認為是導致阿茲海默的主要原因。然而,近期越來越多研究發現,某些人儘管大腦有類澱粉斑塊的形成,卻仍保有較為完整的認知功能,這種情況稱為認知韌性。此篇研究簡述MIT研究員對於認知韌性的新發現。
人類大腦計畫 人類大腦計畫(Human Brain Project)是由歐盟「未來新興技術」計畫所資助的大型旗艦計畫,始於2013年,歷時十年,於上週9/30日正式結束。十年間,歐盟共補助6.07億歐元,於超過500名研究人員參與,涵蓋19個不同國家的155個研究機構。本文將簡介其研究成果。
從日常生活經驗可以知道,我們特別喜歡高糖分與高油份的食物,例如深受大眾喜愛的珍奶與雞排。這些高糖高油的食物提供了我們特殊的「口感」與飲食體驗。食物中糖份的多寡可以由口腔中的糖份受器感知,然而,油份的多寡是如何透過口腔感測而得的,則尚不明瞭。此文將帶您一起解惑。
過去,科學家認為人類在持續睡眠過程中,普遍不會接受外界刺激並因此而做出反應。這種持續睡眠過程中的反應,需要與一般日常生活中的因鬧鐘或警鈴而做出的反應區隔開來,因為這時候人類其實已經被喚醒,而非持續的睡眠過程。那麼人類到底是否有能力在持續睡眠中,對外界刺激反應呢? 請閱讀此文。
來自澳洲昆士蘭大學的研究團隊,近期於Imaging Neuroscience期刊(前NeuroImage編輯團隊設立之期刊),發表將DIANA序列應用於人腦之可行性,其中DIANA序列能透過磁振造影直接顯示神經活動。此文將簡述此研究成果。
神經科技新創公司Precision Neuroscience,近期收購一間微機電工廠,期望購透此次收購能提升其旗下大腦電極的製造效能與品質。
阿茲海默症與其病理 在阿茲海默症患者中,腦類神經元多可發現類澱粉蛋白的沉積,因此類澱粉蛋白斑塊的形成,一直被認為是導致阿茲海默的主要原因。然而,近期越來越多研究發現,某些人儘管大腦有類澱粉斑塊的形成,卻仍保有較為完整的認知功能,這種情況稱為認知韌性。此篇研究簡述MIT研究員對於認知韌性的新發現。
人類大腦計畫 人類大腦計畫(Human Brain Project)是由歐盟「未來新興技術」計畫所資助的大型旗艦計畫,始於2013年,歷時十年,於上週9/30日正式結束。十年間,歐盟共補助6.07億歐元,於超過500名研究人員參與,涵蓋19個不同國家的155個研究機構。本文將簡介其研究成果。
你可能也想看
Google News 追蹤
Thumbnail
這個秋,Chill 嗨嗨!穿搭美美去賞楓,裝備款款去露營⋯⋯你的秋天怎麼過?秋日 To Do List 等你分享! 秋季全站徵文,我們準備了五個創作主題,參賽還有機會獲得「火烤兩用鍋」,一起來看看如何參加吧~
Thumbnail
11/20日NVDA即將公布最新一期的財報, 今天Sell Side的分析師, 開始調高目標價, 市場的股價也開始反應, 未來一週NVDA將重新回到美股市場的焦點, 今天我們要分析NVDA Sell Side怎麼看待這次NVDA的財報預測, 以及實際上Buy Side的倉位及操作, 從
Thumbnail
Hi 大家好,我是Ethan😊 相近大家都知道保濕是皮膚保養中最基本,也是最重要的一步。無論是在畫室裡長時間對著畫布,還是在旅途中面對各種氣候變化,保持皮膚的水分平衡對我來說至關重要。保濕化妝水不僅能迅速為皮膚補水,還能提升後續保養品的吸收效率。 曾經,我的保養程序簡單到只包括清潔和隨意上乳液
Thumbnail
本文分享了澳洲最後一天的行程,特別強調了雪梨魚市場的生蠔和皇家植物園,並提及了Betty's Burgers,達令港日景和YO-CHi冰店等美食景點。這是一篇充滿美食和旅遊景點的文章。
Thumbnail
這是我澳洲8天7夜墨爾本雪梨自由行的第七天,這天我透過KKday上面購買的行程,進行了藍山一日遊,回程並搭渡輪到了歌劇院那帶,且到了雪梨大橋附近走走,也嘗試了到澳洲一定要試試看的袋鼠肉!
Thumbnail
十二月的尾巴,歲末年初的城市中每個角落都點綴著閃亮的燈飾,迎接著充滿希望和機會的嶄新一年的到來。在世界各地不同的文化和國家用獨特的傳統慶祝....
Thumbnail
借鏡於真實神經系統,科學家正在研發神經型態的人工智慧。其中包括矽晶體的神經型態人工智慧,例如脈衝神經網路(SNN),或者利用材料的物理或化學特性來產生類似突觸的可塑性記憶(memristive)的特性。本文將簡介最新的神經型態人工智慧,他們將開啟低耗能高效率的人工智慧時代。
Thumbnail
聲學觸控系統是一種感官轉換系統,透過將視覺轉換成聲音,進而讓視障者可以感知外在世界。例如將文字轉成聲音的文本朗讀系統等。目前全世界有約2.5億多名視障者,聲學觸控系統將有助於提升視障者日常生活的獨立性。本文將簡介澳洲雪梨科大所研發的新一代聲學觸控系統。
Thumbnail
擁有獨步全球眼球醫療技術的美國上市公司ABVC集團,旗下高階醫材人工玻璃體Vitargus即將步入最終臨床尾聲,該項臨床於澳洲最大的眼科權威「雪梨眼科醫院」執行。臨床醫學經驗豐富亦是該科畢業的成大視網膜科主任張義昇博士認為,Vitargus未來無疑是眼科醫療行為的重要醫材,更是前所未見的前瞻創舉
Thumbnail
Responsible service of alcohol(RSA)酒類服務責任證書 簡單來說,只要在澳洲想要從事酒類餐飲相關類型的工作,雇主都會要求你有RSA證照,才能合法上班!舉凡Bar、餐酒館、銷售酒類或是任何有賣酒精飲料的餐廳都需備有此證照。 課程有實體和線上 不同州有不同價格 有
Thumbnail
雪梨住宿推薦 Value Suites Green Square與Hyde Park Inn
Thumbnail
Reading is a static journey. Travel is mobile reading. 讀書是靜止的旅遊,旅遊是移動的閱讀。 一路往北來到了雪梨,總共開了快600公里(台灣從南到北端約380公里),今天竟花了六個多
Thumbnail
雪梨週六、日公車和船舶只付費一次車資,可以任意乘坐,利用週末假日可以逛很多遠一點的小城鎮。
Thumbnail
這個秋,Chill 嗨嗨!穿搭美美去賞楓,裝備款款去露營⋯⋯你的秋天怎麼過?秋日 To Do List 等你分享! 秋季全站徵文,我們準備了五個創作主題,參賽還有機會獲得「火烤兩用鍋」,一起來看看如何參加吧~
Thumbnail
11/20日NVDA即將公布最新一期的財報, 今天Sell Side的分析師, 開始調高目標價, 市場的股價也開始反應, 未來一週NVDA將重新回到美股市場的焦點, 今天我們要分析NVDA Sell Side怎麼看待這次NVDA的財報預測, 以及實際上Buy Side的倉位及操作, 從
Thumbnail
Hi 大家好,我是Ethan😊 相近大家都知道保濕是皮膚保養中最基本,也是最重要的一步。無論是在畫室裡長時間對著畫布,還是在旅途中面對各種氣候變化,保持皮膚的水分平衡對我來說至關重要。保濕化妝水不僅能迅速為皮膚補水,還能提升後續保養品的吸收效率。 曾經,我的保養程序簡單到只包括清潔和隨意上乳液
Thumbnail
本文分享了澳洲最後一天的行程,特別強調了雪梨魚市場的生蠔和皇家植物園,並提及了Betty's Burgers,達令港日景和YO-CHi冰店等美食景點。這是一篇充滿美食和旅遊景點的文章。
Thumbnail
這是我澳洲8天7夜墨爾本雪梨自由行的第七天,這天我透過KKday上面購買的行程,進行了藍山一日遊,回程並搭渡輪到了歌劇院那帶,且到了雪梨大橋附近走走,也嘗試了到澳洲一定要試試看的袋鼠肉!
Thumbnail
十二月的尾巴,歲末年初的城市中每個角落都點綴著閃亮的燈飾,迎接著充滿希望和機會的嶄新一年的到來。在世界各地不同的文化和國家用獨特的傳統慶祝....
Thumbnail
借鏡於真實神經系統,科學家正在研發神經型態的人工智慧。其中包括矽晶體的神經型態人工智慧,例如脈衝神經網路(SNN),或者利用材料的物理或化學特性來產生類似突觸的可塑性記憶(memristive)的特性。本文將簡介最新的神經型態人工智慧,他們將開啟低耗能高效率的人工智慧時代。
Thumbnail
聲學觸控系統是一種感官轉換系統,透過將視覺轉換成聲音,進而讓視障者可以感知外在世界。例如將文字轉成聲音的文本朗讀系統等。目前全世界有約2.5億多名視障者,聲學觸控系統將有助於提升視障者日常生活的獨立性。本文將簡介澳洲雪梨科大所研發的新一代聲學觸控系統。
Thumbnail
擁有獨步全球眼球醫療技術的美國上市公司ABVC集團,旗下高階醫材人工玻璃體Vitargus即將步入最終臨床尾聲,該項臨床於澳洲最大的眼科權威「雪梨眼科醫院」執行。臨床醫學經驗豐富亦是該科畢業的成大視網膜科主任張義昇博士認為,Vitargus未來無疑是眼科醫療行為的重要醫材,更是前所未見的前瞻創舉
Thumbnail
Responsible service of alcohol(RSA)酒類服務責任證書 簡單來說,只要在澳洲想要從事酒類餐飲相關類型的工作,雇主都會要求你有RSA證照,才能合法上班!舉凡Bar、餐酒館、銷售酒類或是任何有賣酒精飲料的餐廳都需備有此證照。 課程有實體和線上 不同州有不同價格 有
Thumbnail
雪梨住宿推薦 Value Suites Green Square與Hyde Park Inn
Thumbnail
Reading is a static journey. Travel is mobile reading. 讀書是靜止的旅遊,旅遊是移動的閱讀。 一路往北來到了雪梨,總共開了快600公里(台灣從南到北端約380公里),今天竟花了六個多
Thumbnail
雪梨週六、日公車和船舶只付費一次車資,可以任意乘坐,利用週末假日可以逛很多遠一點的小城鎮。