把語音翻成手語 智慧眼鏡助聽障人士溝通無礙

·4 分鐘 (閱讀時間)
圖/TVBS

聽障人士有福了!埃及一名工程系學生研發了一款智慧眼鏡,能夠把語音和文字翻譯成手語,以擴增時境的方式呈現,有助於即時溝通,目前還在持續擴充不同語言的手語辭庫,雖然透過3D列印,產能有限,但未來有機會量產,聽障人士只要一鏡在手,溝通無障礙。

埃及工程系學生 歐瑪:「嗨!我的名字是歐瑪。」

不會手語的人想和聽障人士溝通, 靠這副智慧眼鏡就能辦到。

測試人員 札納提vs.埃及工程系學生 歐瑪:「我愛你。我愛你。(手語)」

這名埃及工程系學生歐瑪, 利用3D列印技術設計了一款智慧眼鏡,固定在眼鏡上的小型攝影鏡頭,能夠接收語音訊號,利用AI人工智慧技術,即時翻譯成手語,傳達給聽障人士。

埃及工程系學生 歐瑪:「這個概念是讓聽障者戴上眼鏡,當有人和他們說話時,他們可以按下按鈕,把人聲翻譯成手語,顯示在他們眼前的螢幕上。」

聲音轉換成手語圖示,以擴增實境方式顯示,當用戶使用手語時,眼鏡上的感應器也能翻譯成語音,讓對方聽到他們表達的內容,如果想要閱讀文字,只需按下另一個按鈕,眼鏡就能透過感應器,將文字翻譯成手語。

埃及工程系學生 歐瑪:「在過去的六年中,我從行動應用程式開發到各種模型,直到現在你看到的這個眼鏡,將英文語音和文字翻譯成手語,但是手語詞彙有限,為了完成我的最終產品,我需要翻譯阿拉伯語和口語阿拉伯語。」

歐瑪開發的翻譯眼鏡原型,參考美國的智慧眼鏡設計,目前手語辭庫不足,而且各國表達方式不同,還有很大的改善空間,倚靠3D列印產量有限,最終目標希望能在工廠量產。

埃及內閣專業口譯員 伊瑪德:「作為手語專家,我看得出來眼鏡的手語是正確的,它將幫助許多有聽力障礙的人。」

埃及智慧眼鏡幫助人與人溝通,義大利則是研發了新款人形機器人,學習判讀人類情緒。

彷彿真人五官皮膚的機器人,嘴角上揚微笑、皺眉咬唇生氣,或是嘴角下沉透露悲傷,表情變換自如,由義大利比薩大學研發的人形機器人「阿貝爾」,將成為人類的好幫手。

研究員 可米奈里:「阿貝爾專案一開始是技術人員和藝術家之間的特殊合作計畫,目標是創造一個人形機器人,同時也是研究人類情感和互動的樞紐。」

阿貝爾的框架和頭部結構,由荷蘭電子動畫設計師霍根焊接而成,外型設計成一個12歲男孩的模樣,選擇這個特定的年齡、面部特徵和身體構造,是為了提高機器人的「關係潛力」,也就是兒童與父母建立關愛關係的潛力,研究員將在他的身體安裝特殊軟體程式,看到人就能掃描比對出性別、年齡和情緒,即時反應出開心和生氣的百分比。

研究員 可米奈里:「我們想知道機器,是否可以讓人保持健康,不僅是身體上的,還有心理和情感上的,這在某些族群尤其重要,例如自閉症,或行為和社會失調者。」

具有同理心的機器人,可望幫助自閉症、阿茲海默症患者等弱勢族群,它內建的相機、麥克風和熱像掃描儀,可以觀察人類的語音頻率、心跳頻率以及皮膚溫度變化,再利用這些參數,推斷出人類心情。

比薩大學生物工程教授 希林格:「當然在社會中使用人形機器人,牽涉到道德問題,我們必須將這些機器人,視為能夠幫助我們的夥伴,但是我們想要運用阿貝爾的方式是,在家裡有一個機器人夥伴,來幫助老人或行動不便的人。」

研究團隊對阿貝爾寄予厚望,希望它能讀懂人類心思,達到陪伴功能,對人口老化的義大利社會有所幫助。

更多 TVBS 報導
不是故意!弱勢奶奶口罩破損不敢進超商 熱心女孩幫忙實聯制
口罩遮老師嘴型! 家長嘆「聽損生」整年學習進度落後
北市疫情記者會有這亮點! 超快手不輸中央AI系統
日「透明口罩」秀笑容 網酸:黏到鼻涕怎辦