映維網,國際權威虛擬現實(VR)信息平臺,提供最快、最全、最有價值 VR 信息資訊!

文章相關引用及參考:映維網

記錄手部動作並將其轉換爲文字

(映維網 2018 年 04 月 19 日)意大利初創公司 Limix 開發了一種名爲 Talking Hands 的手套,其可以記錄手部動作並將其轉換爲文字,轉發至智能手機設備,然後再通過語音合成器進行播放。他們希望以這種方式來彌合大多數聾障人士所面臨的通信障礙。

Limix 的創始人 Francesco Pezzuoli 說道:"Talking Hands 不僅可以翻譯每一個字母,而且它的可定製程度非常高:用戶可以記錄他 / 她的手語,然後 Talking Hands 就會翻譯它們。這是一種可穿戴設備,不需要任何外部攝像頭或計算機,因此用戶隨時隨地都可以使用它。"

該項目始於一年前,當時是作爲 Limix,意大利國家聾人協會 ( ENS ) ,以及專門教導聾啞學生的意大利公立高中 I.S.I.S.S. Magarotto 之間的合作產物。然而,人們告訴 Pezzuoli 和另一位聯合創始人 Dario Corona 說這一概念不會成功,因爲設備無法測量細微的手指動作。但他們堅持不懈,並最終研發出可行的技術。現在,他們正準備在 2018 年 6 月推出第一個工業原型。

他們的概念成爲了今年 The Chivas Venture 競賽的最終入圍項目之一,並有機會競逐 100 萬美元的投資。在今年 5 月,最終入選者將乘飛機前往阿姆斯特丹蔘加最終的決賽。屆時他們將有五分鐘時間向專家評審團推銷他們的項目。對於 The Chivas Venture 的風投,開發團隊希望這可以爲工業原型的生產和擴展提供資金支持。

Pezzuoli 解釋說:" 主要的問題是,非手語者通常不太瞭解手語。他們可能甚至沒有意識到美國手語 ( 和其他手語,如英國手語和中國手語 ) 是非常不同的語言,其有着自己的語法和措辭,而不是口頭語言的單詞重述。"

Talking Hands 能夠繞開這個問題,因爲其允許每個用戶通過應用程序創建和自定義他們自己的手語,並將其直接鏈接到智能手機。他們可以創建專用於不同情況的字典,例如在醫療緊急情況下需要與醫生溝通的常用詞語。

Pezzuoli 聲稱:" 從來沒有人能夠發現和實現像我們這樣簡單,低成本和有用的解決方案。Talking Hands 的首次生產成本約爲 500 歐元,包含一切,因此與市場上的其他手套相比,它的價格相對較低。"

具體操作:

用戶將 Talking Hands 應用下載到移動設備上。

用戶將應用的口頭語言設置爲英語和意大利語等語言,將其作爲手語識別的輸出語言。

然後,用戶可以在穿戴手套時錄製手語,然後系統會將其與字母,單詞或整個短語相關聯。

每當用戶重複該手語時,智能手機都會代表用戶說出相應的詞語。

Talking Hands 可以翻譯世界各地使用的幾種不同手語:ASL(美國手語),BSL(英國手語),CSL(中國手語)等等。

Talking Hands 同時可以與增強現實系統進行交互,從而進行員工培訓,與虛擬博物館和遊戲控制器交互。

意大利國立聾人高等教育研究所(National Institute for Higher Education of Deaf People)的 Rita Antoniozzi 教授解釋說:"Talking Hands 可以幫助聾啞人擺脫沉默,使他們能夠與不懂手語的人進行第一範式的溝通。" 她認爲,這項技術將能爲失聰用戶提供支持,使他們能夠實現更大程度的獨立性和平等性。

但對 Pezzuoli 而言,平等性的好處在很大程度上是雙向的:" 我想證明技術可以成爲統一和悅人的力量,使人成爲中心,這樣我們就可以創建並擴大這種關係,納入殘疾人,並與他們的世界和文化融合在一起。" 他補充說,殘疾人士看待世界的不同方式實際上是一項重要資產,它可以帶來創造性思維和創新,因此賦予他們 " 聲音 " 不僅對聾人社區有好處,其對整個社會都有很大的益處。

文章《手套 Talking Hands 可以記錄手部動作並轉換爲文字信息》首發於 映維網。

相關文章