兩名90后研究生發(fā)明翻譯臂環(huán) 能將手語(yǔ)轉化成語(yǔ)音

兩名90后研究生發(fā)明翻譯臂環(huán) 能將手語(yǔ)轉化成語(yǔ)音

　　北京航空航天大學(xué)研究生王娜娜、清華大學(xué)研究生黃爽，歷時(shí)兩年，為失語(yǔ)者群體研究出一款直接將手語(yǔ)轉化成語(yǔ)音的翻譯臂環(huán)。應用后，可以實(shí)現失語(yǔ)者與普通人的流利對話(huà)。她們說(shuō)，團隊從沒(méi)想過(guò)賺錢(qián)，只想幫失語(yǔ)者朋友解決溝通障礙。

　　90后女學(xué)霸研發(fā)手語(yǔ)翻譯器 通過(guò)臂環(huán)捕捉肌電信號

　　演示者用手指向前方，又做出點(diǎn)贊的手勢，“你好”的文字快速地反應在A(yíng)pp“手音”的界面上。捕捉手部運動(dòng)的肌電信號的是演示者手臂上的黑色臂環(huán)，看上去像跑步時(shí)用的護腕。

　　“手音”是一款針對失語(yǔ)者的小眾產(chǎn)品，預計今年5月下旬上線(xiàn)。普通人可能難以想象這款產(chǎn)品的意義所在——手語(yǔ)是失語(yǔ)者彼此溝通的橋梁，但對于普通人來(lái)說(shuō)是比所有外語(yǔ)都難的語(yǔ)言，“手音”將做潤物細無(wú)聲的溝通橋梁。

　　“手音”的創(chuàng )始人王娜娜和聯(lián)合創(chuàng )始人黃爽原是北京航空航天大學(xué)2012級的學(xué)生，她們是同一個(gè)宿舍的閨蜜，兩個(gè)充滿(mǎn)活力的女生在2015年開(kāi)始想為失語(yǔ)者做些什么。

　　在一次活動(dòng)上，王娜娜認識了北京聯(lián)合大學(xué)特殊教育學(xué)院畢業(yè)的失語(yǔ)者張權，并成了好朋友。因為王娜娜不會(huì )手語(yǔ)，這兩位現實(shí)中的朋友相處更像網(wǎng)友，即便見(jiàn)面也往往會(huì )求助微信溝通。

　　回到宿舍，王娜娜把張權的故事告訴了黃爽。她們此后認識了更多的失語(yǔ)者，也愈發(fā)感到溝通的困難。“有時(shí)我覺(jué)得我說(shuō)話(huà)是在 傷害 他們，一聊得開(kāi)心就在想是不是忽略他們了，甚至有些自責。”王娜娜說(shuō)。

　　兩個(gè)善良的姑娘一直在想，張權是失語(yǔ)者中的幸運兒，不僅可以上學(xué)還有工作，更多的失語(yǔ)者因為溝通一直是社會(huì )的邊緣人，她們假想：老板開(kāi)會(huì )聽(tīng)不見(jiàn)，點(diǎn)外賣(mài)沒(méi)辦法和店家溝通，別人怎么能接納他們？《新聞聯(lián)播》有手語(yǔ)同步翻譯，可其他直播節目如果沒(méi)有字幕，失語(yǔ)者就永遠無(wú)法享受它。

　　上網(wǎng)一查，數字更讓兩人咋舌：失語(yǔ)者(包含聽(tīng)障人士、腦中風(fēng)患者、腦癱患者和漸凍癥患者)在中國的數量達到7000萬(wàn)人，占總人口的5%，這是一個(gè)非常龐大的數字。

　　兩個(gè)人想起了參加“馮如杯”(馮如杯為北航校內學(xué)生學(xué)術(shù)科技作品競賽)時(shí)的圖像識別項目，當時(shí)這個(gè)項目獲得了一等獎，或許可以用這種技術(shù)幫助失語(yǔ)者。王娜娜回憶：“我們感覺(jué)發(fā)現了一個(gè)沒(méi)有人發(fā)現的需求，想成為個(gè)實(shí)現它的人，也讓我們所學(xué)的知識有價(jià)值。”

　　于是，她倆著(zhù)手研究手語(yǔ)翻譯的可行性，開(kāi)始查論文、做實(shí)驗、寫(xiě)代碼，用馮如杯一等獎獎金5萬(wàn)元作為啟動(dòng)資金行動(dòng)起來(lái)。圖像識別被否決了，因為不能隨時(shí)攜帶攝像頭；手套被否決了，因為太引人注意，最終確定了通過(guò)臂環(huán)捕捉肌電信號的方法。因為智能手表逐漸普及，失語(yǔ)者帶著(zhù)臂環(huán)看上去并不突兀。

　　產(chǎn)品一次次迭代，為的是要保護失語(yǔ)者的尊嚴。黃爽記得，她們做過(guò)“體驗一天失語(yǔ)者”的活動(dòng)。在便利店，因為結賬時(shí)需要了解價(jià)格，失語(yǔ)者只能通過(guò)手機和店員溝通，時(shí)間稍長(cháng)排在后面的人開(kāi)始不耐煩地催促。“如果別人知道我是失語(yǔ)者可能會(huì )體諒，但不知道就會(huì )埋怨，越埋怨我越著(zhù)急。”一些失語(yǔ)者不愿意別人稱(chēng)呼他們?yōu)椤懊@人”，自己會(huì )寫(xiě)成“龍人”。

　　確定研發(fā)方向后，關(guān)鍵是不斷地輸入數據、調試數據以保證手語(yǔ)翻譯的準確性。為了檢驗模型的可靠性，最初只有兩個(gè)人在錄手語(yǔ)的數據，整天戴著(zhù)臂環(huán)不停地做動(dòng)作，黃爽開(kāi)玩笑說(shuō)：“練下去咱倆就要成為 麒麟臂 啦！”

　　“當你真正去幫助他們，他們就知道是為他們好，就會(huì )非常配合。”王娜娜說(shuō)，為了保證數據的多樣化，并且真正讓失語(yǔ)者喜歡，她們后來(lái)聯(lián)系了天津理工大學(xué)聾人工學(xué)院，合作進(jìn)行數據采集和智能臂閉環(huán)開(kāi)發(fā)，還與北京市朝陽(yáng)區殘聯(lián)達成合作意向，為“手音”的產(chǎn)品服務(wù)化提供咨詢(xún)、指導。張權也成了團隊的顧問(wèn)。

　　如今，“手音”涵蓋了200個(gè)手語(yǔ)動(dòng)作，為了保證精確度，每一個(gè)動(dòng)作錄制了1000人次。在有了自己的手勢數據庫之后，團隊還搭建了一個(gè)7層BP神經(jīng)網(wǎng)絡(luò )(一種按誤差逆傳播算法訓練的多層前饋網(wǎng)絡(luò )，是目前應用最廣泛的神經(jīng)網(wǎng)絡(luò )模型之一)對數據速度進(jìn)行訓練，目前識別準確度已經(jīng)達到95%。

　　直到去年8月，團隊里只有王娜娜和黃爽兩個(gè)人，后來(lái)其他人逐漸加入。他們沒(méi)有辦公室，開(kāi)會(huì )都是“打游擊戰”，咖啡廳、餐廳、教室都被征用過(guò)，做研發(fā)都是在自己的實(shí)驗室里，但王娜娜說(shuō)：“我們一天都沒(méi)有想過(guò)放棄。”后來(lái)，團隊內有人因出國而退出，王娜娜在北航保研繼續深造，黃爽保研至清華大學(xué)。兩個(gè)女學(xué)霸沒(méi)有因升學(xué)而放棄團隊，繼續堅定地吸引人才研發(fā)產(chǎn)品。

　　由女生主導的技術(shù)型創(chuàng )業(yè)團隊很少見(jiàn)，兩個(gè)人也經(jīng)歷了磨合。最初，黃爽遇到意見(jiàn)不同時(shí)會(huì )等著(zhù)雙方都冷靜下來(lái)回宿舍再溝通。王娜娜告訴她，團隊溝通對事不對人，要彼此敞開(kāi)心扉，現在兩個(gè)人可以為一件事辯論個(gè)“你死我活”，也能在達成一致意見(jiàn)后手挽手去吃吃喝喝。團隊里還有其他技術(shù)人員，大家一起熬夜寫(xiě)代碼的時(shí)候，兩個(gè)女生也會(huì )偶爾化身為“程序員鼓勵師”，一起為團隊加油打氣。

　　這兩個(gè)分別出生于1994年、1995年的女生笑著(zhù)說(shuō)：“或許因為我們現在還沒(méi)有走向社會(huì )，沒(méi)有買(mǎi)房的苦惱和社會(huì )的壓力，只是覺(jué)得我們所擁有的技術(shù)能夠對社會(huì )有價(jià)值，能夠真正幫助一些人，我們又有時(shí)間，那就做吧！”

　　她們關(guān)于未來(lái)有很多設想，“手音”可以實(shí)現面對面小聊和長(cháng)時(shí)間對話(huà)的功能，未來(lái)還可以推出手語(yǔ)教學(xué)、手語(yǔ)字母和智能臂環(huán)閉環(huán)，解決手語(yǔ)教師缺乏等各種問(wèn)題。此外，這種人工智能技術(shù)成熟后還可以應用在其他方面，例如可以教學(xué)鋼琴的孩子更加準確地彈琴。

　　手語(yǔ)翻譯臂環(huán)或全球責任創(chuàng )新挑戰賽的

　　國際在線(xiàn)5月2日消息，近日，清華大學(xué)、北京航空航天大學(xué)的90后創(chuàng )業(yè)團隊為聽(tīng)障人士設計的手語(yǔ)翻譯臂環(huán)，獲得了由聯(lián)合國開(kāi)發(fā)計劃署與中國互聯(lián)網(wǎng)公司百度共同主辦的“極 致未來(lái)”全球責任創(chuàng )新挑戰賽的。這一賽事共計收到2075份方案，其中有超過(guò)八成的作品出自中國各大高校的大學(xué)生之手。手語(yǔ)翻譯臂環(huán)、疲勞駕駛的預測系統、垃圾自動(dòng)識別系統、“蜘蛛俠”智能多功能六足機器人等十份方案，進(jìn)入最后的總決賽，其中手語(yǔ)翻譯臂環(huán)獲得。

　　（資料來(lái)源：央視新聞、國際在線(xiàn)、中國青年報）