澳洲雪梨科技大學研發新一代視障聲學觸控系統

更新 發佈閱讀 2 分鐘
vocus|新世代的創作平台




聲學觸控系統(Acoustic Touch)

聲學觸控系統是一種感官轉換系統,透過將視覺轉換成聲音,進而讓視障者可以感知外在世界。常見的系統包含,將文字轉成聲音的文本朗讀系統、例如倒車雷達般的障礙物警示系統等等。目前全世界有約2.5億多名視障者,聲學觸控系統將有助於視障者日常生活活動,例如找尋物品、行走辨識方向都會更為容易。


研究重點

來自澳洲雪梨科技大學的研究團隊改良既有的聲學觸控系統且提升其適用性,此研究成果已刊登在Plos One期刊。研究團隊利用市面上商用地擴增實境眼鏡(AR眼鏡),利用其前置鏡頭與AI物體辨識技術,辨識物體後,再以物體的聲音標誌來標示物體的所在。聲音標誌物體的特徵聲音,例如書本的特徵就是翻書聲。使用者在使用此系統時,會利用頭部的轉動來掃描周圍物品,當正臉對到物體時,就會響起聲音標誌。研究團隊招募了視障者、以及一般健康人但蒙住其眼睛來進行實驗。研究結果發現,視障者在使用聲學觸控系統時,其物體辨識率與直接給予聲音告知物體方向、以及由物體附近置放的喇叭發出聲音指示其位子的辨識效果相當。惟健康受試者在蒙住眼睛時,其聲學觸控辨識率與其他兩者方法相比較差,但仍可達到七成的辨識效果。這是因為健康受試者平常仰賴視覺提示,由身體方向來記憶空間位子的協調性較差。此實驗結果顯示,聲學觸控將可有效的協助視障者辨識周遭物體,未來將有望大幅提升視障者獨立生活的能力。


思考

這個研究有兩個可以探討的點。第一、此聲學觸控系統需仰賴受試者探詢空間、辨識物體聲音標誌與空間記憶的能力。因此相較直接給予指示物體位子或由物體所在位子發出聲音的方式,都要來的困難得多。然而實驗顯示,使用新聲學觸控的物體辨識率、物體辨識所需時間都沒有顯著差異。這或許是因為轉頭辨識方向是一個人類很自然的行為。通常人類在透過聲音辨識物體方向時,都會將頭轉向發出聲音的物體。儘管這個行為很符合直覺,但仍有兩位受試者無法在時間內完成訓練而失敗。第二、聲學觸控也仰賴AI辨識的準確度,因為倘若AI辨識系統的準確度不佳、或是可以辨識的物體有限,將會影響其可適性。目前實驗也僅測試四項物品,因此未來還需要進一步的擴充辨識品項,以增加實用性。


論文:

https://doi.org/10.1371/journal.pone.0290431


圖片來源:

擷取自論文中的影片,獲CC BY 4.0授權。


#神經科技

#視障輔助系統

#聲學觸控

#擴增實境眼鏡


留言
avatar-img
B612號神經元的沙龍
6會員
24內容數
都說千金難買早知道,大腦是我們最重要也最複雜的器官,你了解多少呢?本專題將持續關注神經科學的大小事,期望透過分享這些新聞、故事,讓神經科學走入大眾,而這些科技其實離我們不遙遠。歡迎各位訂閱與贊助。
2024/12/03
近期Nature網站上刊登一篇科普性質的文章,簡介了腦機介面為義肢帶來的革新。 義肢的使用,從原本的已運動功能為主的要求,逐漸轉化為要能更妥善的讓人使用。要如何讓義肢可以讓人使用起來更方便呢?請繼續閱讀下去。
Thumbnail
2024/12/03
近期Nature網站上刊登一篇科普性質的文章,簡介了腦機介面為義肢帶來的革新。 義肢的使用,從原本的已運動功能為主的要求,逐漸轉化為要能更妥善的讓人使用。要如何讓義肢可以讓人使用起來更方便呢?請繼續閱讀下去。
Thumbnail
2024/11/19
道德基礎理論(Moral Foundation Theory)認為有五種基礎道德價值,包含以關注個人權益的公平性與關懷同情,以及關注整體社會和諧的忠誠奉獻、服從權威與傳統,以及身心的純潔。道德感屬於人類認知功能的一部分,受到外在環境所影響,因此,道德感是否與季節相關也成為一個待探討的課題。
Thumbnail
2024/11/19
道德基礎理論(Moral Foundation Theory)認為有五種基礎道德價值,包含以關注個人權益的公平性與關懷同情,以及關注整體社會和諧的忠誠奉獻、服從權威與傳統,以及身心的純潔。道德感屬於人類認知功能的一部分,受到外在環境所影響,因此,道德感是否與季節相關也成為一個待探討的課題。
Thumbnail
2024/11/11
腦類器官是利用幹細胞培養出的三維神經組織。近年來,許多研究開始利用這種生物神經網路進行AI運算。本文將簡介瑞士的Final Spark公司所開發的 Neuroplatform 平台。
Thumbnail
2024/11/11
腦類器官是利用幹細胞培養出的三維神經組織。近年來,許多研究開始利用這種生物神經網路進行AI運算。本文將簡介瑞士的Final Spark公司所開發的 Neuroplatform 平台。
Thumbnail
看更多
你可能也想看
Thumbnail
本文分析導演巴里・柯斯基(Barrie Kosky)如何運用極簡的舞臺配置,將布萊希特(Bertolt Brecht)的「疏離效果」轉化為視覺奇觀與黑色幽默,探討《三便士歌劇》在當代劇場中的新詮釋,並藉由舞臺、燈光、服裝、音樂等多方面,分析該作如何在保留批判核心的同時,觸及觀眾的觀看位置與人性幽微。
Thumbnail
本文分析導演巴里・柯斯基(Barrie Kosky)如何運用極簡的舞臺配置,將布萊希特(Bertolt Brecht)的「疏離效果」轉化為視覺奇觀與黑色幽默,探討《三便士歌劇》在當代劇場中的新詮釋,並藉由舞臺、燈光、服裝、音樂等多方面,分析該作如何在保留批判核心的同時,觸及觀眾的觀看位置與人性幽微。
Thumbnail
聽覺器官接收聲音,進一步讓我們理解聲音的內容。聽覺障礙是什麼?為什麼會聽覺障礙?會有哪一些表現或特徵?若出現聽覺障礙的症狀,可以如何改善?常間的疑問解答,帶你一次了解聽覺障礙!
Thumbnail
聽覺器官接收聲音,進一步讓我們理解聲音的內容。聽覺障礙是什麼?為什麼會聽覺障礙?會有哪一些表現或特徵?若出現聽覺障礙的症狀,可以如何改善?常間的疑問解答,帶你一次了解聽覺障礙!
Thumbnail
單晶片眼鏡,我也有一些想法。 我們可以嘗試將微型傳感器集成到普通眼鏡上,通過無線信號的傳輸,將人體生理數據實時顯示出來。 這不僅可以幫助人們更好地了解自己的身心狀態,也能促進人與人之間的情感交流。 至於單晶片眼鏡,我已經有了初步的設計方案。我們可以將生理指標傳感器集成到鏡框上,通過藍牙技術將數
Thumbnail
單晶片眼鏡,我也有一些想法。 我們可以嘗試將微型傳感器集成到普通眼鏡上,通過無線信號的傳輸,將人體生理數據實時顯示出來。 這不僅可以幫助人們更好地了解自己的身心狀態,也能促進人與人之間的情感交流。 至於單晶片眼鏡,我已經有了初步的設計方案。我們可以將生理指標傳感器集成到鏡框上,通過藍牙技術將數
Thumbnail
當聽力開始衰退時,往往不僅僅影響個人的社交能力,還可能對認知功能造成深遠影響。研究顯示,聽力損失與認知能力下降之間存在著密切關係。隨著年齡的增長,人體的聽覺系統也會逐漸退化,這可能會導致聽力下降。當日常交流變得困難,許多人可能會選擇避免社交活動,這不僅會影響他們的生活質量,還可能加速認知功能的衰退。
Thumbnail
當聽力開始衰退時,往往不僅僅影響個人的社交能力,還可能對認知功能造成深遠影響。研究顯示,聽力損失與認知能力下降之間存在著密切關係。隨著年齡的增長,人體的聽覺系統也會逐漸退化,這可能會導致聽力下降。當日常交流變得困難,許多人可能會選擇避免社交活動,這不僅會影響他們的生活質量,還可能加速認知功能的衰退。
Thumbnail
觸摸式手語是一種發展自美國盲人社區的新型手語,旨在提高聾盲人士之間的交流效率和情感表達能力。本文介紹了觸摸式手語的特點、使用方法以及對聾盲人士的重要性。通過瞭解觸摸式手語,讀者將可以更深入地理解聾盲人士的溝通需求。
Thumbnail
觸摸式手語是一種發展自美國盲人社區的新型手語,旨在提高聾盲人士之間的交流效率和情感表達能力。本文介紹了觸摸式手語的特點、使用方法以及對聾盲人士的重要性。通過瞭解觸摸式手語,讀者將可以更深入地理解聾盲人士的溝通需求。
Thumbnail
《轉轉生》(Re:INCARNATION)為奈及利亞編舞家庫德斯.奧尼奎庫與 Q 舞團創作的當代舞蹈作品,結合拉各斯街頭節奏、Afrobeat/Afrobeats、以及約魯巴宇宙觀的非線性時間,建構出關於輪迴的「誕生—死亡—重生」儀式結構。本文將從約魯巴哲學概念出發,解析其去殖民的身體政治。
Thumbnail
《轉轉生》(Re:INCARNATION)為奈及利亞編舞家庫德斯.奧尼奎庫與 Q 舞團創作的當代舞蹈作品,結合拉各斯街頭節奏、Afrobeat/Afrobeats、以及約魯巴宇宙觀的非線性時間,建構出關於輪迴的「誕生—死亡—重生」儀式結構。本文將從約魯巴哲學概念出發,解析其去殖民的身體政治。
Thumbnail
背景:從冷門配角到市場主線,算力與電力被重新定價   小P從2008進入股市,每一個時期的投資亮點都不同,記得2009蘋果手機剛上市,當時蘋果只要在媒體上提到哪一間供應鏈,隔天股價就有驚人的表現,當時光學鏡頭非常熱門,因為手機第一次搭上鏡頭可以拍照,也造就傳統相機廠的殞落,如今手機已經全面普及,題
Thumbnail
背景:從冷門配角到市場主線,算力與電力被重新定價   小P從2008進入股市,每一個時期的投資亮點都不同,記得2009蘋果手機剛上市,當時蘋果只要在媒體上提到哪一間供應鏈,隔天股價就有驚人的表現,當時光學鏡頭非常熱門,因為手機第一次搭上鏡頭可以拍照,也造就傳統相機廠的殞落,如今手機已經全面普及,題
Thumbnail
聲學觸控系統是一種感官轉換系統,透過將視覺轉換成聲音,進而讓視障者可以感知外在世界。例如將文字轉成聲音的文本朗讀系統等。目前全世界有約2.5億多名視障者,聲學觸控系統將有助於提升視障者日常生活的獨立性。本文將簡介澳洲雪梨科大所研發的新一代聲學觸控系統。
Thumbnail
聲學觸控系統是一種感官轉換系統,透過將視覺轉換成聲音,進而讓視障者可以感知外在世界。例如將文字轉成聲音的文本朗讀系統等。目前全世界有約2.5億多名視障者,聲學觸控系統將有助於提升視障者日常生活的獨立性。本文將簡介澳洲雪梨科大所研發的新一代聲學觸控系統。
Thumbnail
口述影像(Audio Description, AD)是透過口述影像協助視障人士理解視覺內容的技術,並且是體驗文化來重新修正框架認知的重要管道
Thumbnail
口述影像(Audio Description, AD)是透過口述影像協助視障人士理解視覺內容的技術,並且是體驗文化來重新修正框架認知的重要管道
Thumbnail
助聽器的介入時機對聽損者相當重要,而聽力損失一般在30至40分貝左右時便會逐漸影響到日常溝通與生活品質,此時便應考慮使用助聽器了。如果發現您或您的家人看電視、講電話越來越大聲,也有「聽不到」、「聽不清楚」或是「聽不懂」的狀況時,就需要預約更專業完整的聽力檢測及諮詢。
Thumbnail
助聽器的介入時機對聽損者相當重要,而聽力損失一般在30至40分貝左右時便會逐漸影響到日常溝通與生活品質,此時便應考慮使用助聽器了。如果發現您或您的家人看電視、講電話越來越大聲,也有「聽不到」、「聽不清楚」或是「聽不懂」的狀況時,就需要預約更專業完整的聽力檢測及諮詢。
Thumbnail
以有限聽覺與口語方式與外界互動、從小沒有學過手語的聽障者,手語翻譯可以說完全派不上用場,他們需要的是即時文字的提供、聽覺輔助系統例如藍芽傳輸等,甚至需要搭配清楚可辨的唇形來讓他們能更完整、充分的了解到現在,誰說了些什麼。
Thumbnail
以有限聽覺與口語方式與外界互動、從小沒有學過手語的聽障者,手語翻譯可以說完全派不上用場,他們需要的是即時文字的提供、聽覺輔助系統例如藍芽傳輸等,甚至需要搭配清楚可辨的唇形來讓他們能更完整、充分的了解到現在,誰說了些什麼。
Thumbnail
這是一場修復文化與重建精神的儀式,觀眾不需要完全看懂《遊林驚夢:巧遇Hagay》,但你能感受心與土地團聚的渴望,也不急著在此處釐清或定義什麼,但你的在場感受,就是一條線索,關於如何找著自己的路徑、自己的聲音。
Thumbnail
這是一場修復文化與重建精神的儀式,觀眾不需要完全看懂《遊林驚夢:巧遇Hagay》,但你能感受心與土地團聚的渴望,也不急著在此處釐清或定義什麼,但你的在場感受,就是一條線索,關於如何找著自己的路徑、自己的聲音。
追蹤感興趣的內容從 Google News 追蹤更多 vocus 的最新精選內容追蹤 Google News