讓他們的手語被“聽見”

暑假里，河北工業(yè)大學(xué)“譯音”團(tuán)隊(duì)創(chuàng)始人、電氣學(xué)院學(xué)生樊灝澤來到天津市殘疾人之家，為那里的聽障兒童帶去團(tuán)隊(duì)自主研發(fā)的“譯音”手套產(chǎn)品，以及河北工大1000多名大學(xué)生為聽障兒童手寫的愛心明信片。隨著聽障兒童打出的手語，手套發(fā)出了悅耳的聲音：“我今天很開心！”

樊灝澤告訴記者，這款特殊的手套，其核心部件是位于腕部、手背部、指部的3種觸覺傳感器。聽障人士佩戴后，手套可根據(jù)他們的手部動(dòng)作翻譯手語含義、實(shí)時(shí)發(fā)聲，突破了連續(xù)手語和自然手語翻譯技術(shù)壁壘。

為什么要研發(fā)這樣一款手套？這要從3年前的一次經(jīng)歷說起。2019年8月的一天，樊灝澤訂好外賣卻始終無法打通配送員的電話，直到看見外賣平臺(tái)上那句“部分外賣員為聽障人士，如需聯(lián)系，請(qǐng)?jiān)诰€上平臺(tái)打字交流”，他才明白了其中的緣由。自此，他開始關(guān)注聽障群體，在了解到聽障人士因聽力、發(fā)聲障礙而在生活中存在諸多不便時(shí)，他萌生了要幫助他們與世界暢通交流的想法。

說干就干，樊灝澤跟志同道合的小伙伴們組建起“譯音”技術(shù)團(tuán)隊(duì)，將目光聚焦到手語產(chǎn)品的開發(fā)上。此后數(shù)月，團(tuán)隊(duì)實(shí)地調(diào)研了多所特殊教育學(xué)校，詳細(xì)了解聽障人士及志愿者的訴求，將產(chǎn)品重點(diǎn)定位在手語與語音的轉(zhuǎn)換上。

研發(fā)起步階段，團(tuán)隊(duì)采用市面上的傳感器，完成了一代產(chǎn)品的研發(fā)，但發(fā)現(xiàn)翻譯效果不盡如人意。連日泡在實(shí)驗(yàn)室、逐一檢測(cè)各個(gè)技術(shù)環(huán)節(jié)后，他們發(fā)現(xiàn)，市面上的傳感器性能低且數(shù)據(jù)采集維度單一，無法做到實(shí)時(shí)翻譯。

在王志華、張哲兩名教師的指導(dǎo)下，團(tuán)隊(duì)自主研發(fā)了二代產(chǎn)品的核心部件——柔性觸覺集成傳感器。相較傳統(tǒng)傳感器，柔性觸覺傳感器翻譯精度更高，且具有記憶功能，可翻譯因個(gè)人習(xí)慣不同而形成的自然手語。

在設(shè)計(jì)集成電路后，團(tuán)隊(duì)通過上百次的實(shí)驗(yàn)仿真，逐步優(yōu)化各項(xiàng)指標(biāo)。終于，他們的手語翻譯產(chǎn)品——“譯音”手套問世了。

經(jīng)過多次實(shí)驗(yàn)檢驗(yàn)，“譯音”手套可翻譯手語百余條且準(zhǔn)確率高達(dá)94％。為了檢測(cè)產(chǎn)品的實(shí)際應(yīng)用情況，團(tuán)隊(duì)成員聯(lián)系天津市聾人學(xué)校等特教學(xué)校開展試用，產(chǎn)品獲得一致好評(píng)。

“目前我們的產(chǎn)品已經(jīng)處于終試階段，接下來我們想從產(chǎn)品升級(jí)和推廣上著手，讓更多聽障人士使用我們的產(chǎn)品，讓他們的手語可以被世界‘聽見’?！狈疄疂筛嬖V記者，他們的團(tuán)隊(duì)已經(jīng)有了新的目標(biāo)。

《中國教育報(bào)》2022年08月31日第2版