李榮頡正在演示供聾啞人交流使用的“神奇手環(huán)”
央廣網(wǎng)沈陽7月8日消息(記者郭威)東北大學(xué)三名學(xué)生研發(fā)出一種“手語轉(zhuǎn)換發(fā)聲”手環(huán),通過連接服務(wù)器可以讓手語發(fā)聲,,并把外界語音轉(zhuǎn)化為文字,,實現(xiàn)聾啞人和外界的無障礙溝通。5月18日,,該項目獲得了2018“未來力大會”大學(xué)生社會創(chuàng)新大賽全國總冠軍,。今年10月,該團(tuán)隊將代表中國前往美國硅谷參加2018創(chuàng)行世界杯總決賽,。
“你好,,我們幫助聾啞人交流,,請大家支持我們,謝謝,!”隨著佩戴著手環(huán)的李榮頡所做的手語動作,,平板電腦上清晰的發(fā)出了完整意思的語音。讓聾啞人與完全不動懂手語的健全人進(jìn)行交流,,這一看起來“不可完成”的任務(wù),,就這樣在東北大學(xué)李榮頡、曾振,、賀蕭三個大三學(xué)生的手中成為了現(xiàn)實。李榮頡說:“企業(yè)做1到1萬的商業(yè)轉(zhuǎn)化,,而學(xué)生實驗室可以不計回報地做從0到1的技術(shù)研發(fā),。經(jīng)過各種各樣的努力,這個算法模擬出各種問題之后,,第一次做的手勢發(fā)出聲音時,,真的特別開心?!?/p>
在機器人科學(xué)與工程學(xué)院教師王斐的指導(dǎo)下,,這個由三個大學(xué)生組成的團(tuán)隊研發(fā)出了一套基于多源信息融合的手語雙向識別系統(tǒng)。通過連接服務(wù)器把手語動作轉(zhuǎn)化為語句,,同時還可以把外界語音轉(zhuǎn)化為文字,。與傳統(tǒng)基于視覺的手語識別方法相比,可避免光照,、遮擋,、干擾和手指細(xì)微動作無法捕捉等嚴(yán)重缺陷,在便攜實用的同時,,保證了識別的實時性和準(zhǔn)確性,。王斐介紹:“視頻捕獲抓肢體的動作沒有問題,就像體感游戲,,但是手指的動作是采不到的,,還有外界自然光的干擾。而手環(huán)的優(yōu)勢是,,手指在做動作的時候是由手臂的肌肉來牽引的,,表面就有微弱的電信號,通過這個設(shè)備也可以清晰地采集到,?!?/p>
王斐教授正在和學(xué)生們分析交流研發(fā)問題
在研發(fā)過程中,團(tuán)隊曾遇到了智能硬件核心技術(shù)的瓶頸問題,,開發(fā)到一定程度就受制于國外的技術(shù)封鎖,,無法再進(jìn)行深層次開發(fā),。為了能夠做到從軟件到硬件都是自有技術(shù),團(tuán)隊經(jīng)歷了千萬遍枯燥重復(fù)的實驗和數(shù)不清的“推倒重來”,。王斐說:“硬件的困難主要體現(xiàn)在微弱電信號,、生理電信號的采集、放大還有處理,。軟件的難度則是如何能夠把手語拆成單體的手語,,在這個模型里組合,從語句變到句子,,是最難的也是將來能夠保住自己東西的壁壘,。”
充分考慮到聾啞人是普遍收入偏低的弱勢群體,,研發(fā)團(tuán)隊通過對多種材料反復(fù)比對試驗,,最終選擇了在保證產(chǎn)品性能的基礎(chǔ)上,材料成本最低的方案,,以實現(xiàn)項目成果的市場化轉(zhuǎn)換,。王斐表示,目前這個手環(huán)成本才250美元,,價格很便宜,。將來如果實現(xiàn)生產(chǎn)估計售價將在200、300塊錢人民幣,,殘疾人群體是完全負(fù)擔(dān)得起的,。
目前,包括一家國企在內(nèi)的多家國內(nèi)電子信息企業(yè)正在積極與研發(fā)團(tuán)隊就該項目進(jìn)行接觸,。研發(fā)團(tuán)隊成員李榮頡說:“他最希望的事就是看到這個項目真正能夠商品化,,能夠?qū)嵱茫嬲鉀Q聾啞人群體生活不便的問題,,這比發(fā)幾篇論文,,獲不獲獎都來得重要的多?!?/p>
學(xué)生答辯論文被扔 5月11日,,一則“畢業(yè)生答辯準(zhǔn)備不足論文被扔”的視頻在網(wǎng)上流傳,,并引起各方熱議。