5月16日，全球無(wú)障礙宣傳日之際，騰訊優(yōu)圖實(shí)驗(yàn)室宣布攻克AI手語(yǔ)識(shí)別技術(shù)挑戰(zhàn)，聯(lián)合深圳市信息無(wú)障礙研究會(huì)發(fā)布“優(yōu)圖AI手語(yǔ)翻譯機(jī)”，致力于通過(guò)人工智能技術(shù)為聽(tīng)障人群搭建無(wú)障礙溝通平臺(tái)。

　　據(jù)優(yōu)圖實(shí)驗(yàn)室AI手語(yǔ)識(shí)別項(xiàng)目組研究員陽(yáng)趙陽(yáng)介紹，優(yōu)圖AI手語(yǔ)翻譯機(jī)以普通攝像頭作為手語(yǔ)采集裝置，依托高性能計(jì)算機(jī)進(jìn)行后臺(tái)運(yùn)算，用戶(hù)只需面對(duì)攝像頭完成手語(yǔ)表達(dá)，翻譯機(jī)屏幕界面就能快速把手語(yǔ)轉(zhuǎn)換為文字，幫助聽(tīng)障人士和普通人進(jìn)行正常交流，未來(lái)有望在機(jī)場(chǎng)、高鐵、民政窗口等公共場(chǎng)所部署應(yīng)用，助力信息無(wú)障礙城市建設(shè)。

　　這也是繼本月初優(yōu)圖實(shí)驗(yàn)室宣布通過(guò)人工智能技術(shù)幫助警方尋回多名被拐超過(guò)10年兒童之后，騰訊踐行“科技向善”理念的又一體現(xiàn)，也是騰訊在計(jì)算機(jī)視覺(jué)人工智能領(lǐng)域的又一重大技術(shù)突破。

　　(優(yōu)圖AI手語(yǔ)翻譯機(jī)界面)

　　攻克手語(yǔ)識(shí)別難題，自研算法解決溝通障礙

　　據(jù)世界衛(wèi)生組織最新數(shù)據(jù)顯示，目前全球約有4.66億人患有殘疾性聽(tīng)力損失，超過(guò)全世界人口的5%;據(jù)估計(jì)，到2050年這一數(shù)字將達(dá)到9億，全球?qū)⒂屑s十分之一的人出現(xiàn)殘疾性聽(tīng)力損失。據(jù)北京聽(tīng)力協(xié)會(huì)2017年預(yù)估數(shù)據(jù)，國(guó)內(nèi)殘疾性聽(tīng)力障礙人士已達(dá)7200萬(wàn)。

　　雖然我國(guó)在信息無(wú)障礙領(lǐng)域的投入在逐漸增加，但聽(tīng)障人群的一些需求仍得不到滿(mǎn)足，尤其在公共環(huán)境設(shè)施、服務(wù)體驗(yàn)等方面。據(jù)相關(guān)數(shù)據(jù)統(tǒng)計(jì)，我國(guó)目前致力于聽(tīng)障者專(zhuān)業(yè)服務(wù)的人士只有大約一萬(wàn)名，大部分公共服務(wù)并沒(méi)有配備專(zhuān)門(mén)的便利設(shè)施，這些都是聽(tīng)障者長(zhǎng)久以來(lái)面臨的迫切需求。

　　針對(duì)這一社會(huì)痛點(diǎn)，優(yōu)圖團(tuán)隊(duì)首次將計(jì)算機(jī)視覺(jué)人工智能技術(shù)應(yīng)用到手語(yǔ)識(shí)別場(chǎng)景，而此次發(fā)布的“優(yōu)圖AI手語(yǔ)翻譯機(jī)”產(chǎn)品，通過(guò)一臺(tái)搭載高性能計(jì)算機(jī)的終端，可以識(shí)別聽(tīng)障人士的手語(yǔ)，并快速識(shí)別翻譯成文字。

　　據(jù)騰訊優(yōu)圖研究員陽(yáng)趙陽(yáng)介紹，手語(yǔ)翻譯的核心技術(shù)是手語(yǔ)識(shí)別(SLR)，通過(guò)計(jì)算機(jī)算法，自動(dòng)區(qū)分手語(yǔ)表達(dá)中的各類(lèi)手勢(shì)、動(dòng)作、手勢(shì)和動(dòng)作之間的切換，最后將手語(yǔ)翻譯成為文字。此前也有一些團(tuán)隊(duì)探索人工智能技術(shù)在聽(tīng)障無(wú)障礙方面的技術(shù)探索，但往往需要借助于一些額外的設(shè)備或傳感器，不僅增加了使用門(mén)檻并且無(wú)法對(duì)復(fù)雜手語(yǔ)表達(dá)的識(shí)別率。但受限于手語(yǔ)特有的地域性、復(fù)雜性和多樣性，使得這些手語(yǔ)識(shí)別研究即使在深度學(xué)習(xí)的幫助下也依然存在很大的挑戰(zhàn)，難以被實(shí)際應(yīng)用。

　　(手語(yǔ)識(shí)別算法總體框架圖)

　　此次優(yōu)圖AI手語(yǔ)翻譯機(jī)產(chǎn)品，通過(guò)自研算法實(shí)現(xiàn)了對(duì)復(fù)雜手語(yǔ)表達(dá)的識(shí)別技術(shù)突破，參考了先進(jìn)的手勢(shì)識(shí)別、動(dòng)作識(shí)別和序列翻譯等技術(shù)，考慮了手語(yǔ)的地域性和多樣性表達(dá)，包含了不同的表達(dá)習(xí)慣和速度。

　　據(jù)介紹，優(yōu)圖AI手語(yǔ)翻譯機(jī)的數(shù)據(jù)集覆蓋了近千句日常表達(dá)，900個(gè)常用詞匯，同時(shí)對(duì)數(shù)據(jù)進(jìn)行進(jìn)一步的分析和歸納，是最大的中文手語(yǔ)識(shí)別數(shù)據(jù)集。與此同時(shí)，優(yōu)圖AI手語(yǔ)翻譯機(jī)能夠?qū)崿F(xiàn)整句的識(shí)別和翻譯，用戶(hù)表達(dá)的時(shí)候可以連貫將整個(gè)句子表達(dá)完。也不需要設(shè)定特定的結(jié)束或起始動(dòng)作，而是直接對(duì)用戶(hù)的動(dòng)作與否進(jìn)行判斷。

　　踐行科技向善，騰訊攜手無(wú)障礙協(xié)會(huì)攻堅(jiān)場(chǎng)景服務(wù)

　　“優(yōu)圖團(tuán)隊(duì)將繼續(xù)進(jìn)行語(yǔ)料庫(kù)拓展和算法優(yōu)化，進(jìn)一步探索在機(jī)場(chǎng)、民政等公共服務(wù)領(lǐng)域部署，提供無(wú)障礙溝通解決方案，方便聽(tīng)障人日常交流提供便利。”騰訊杰出科學(xué)家賈佳亞教授表示。

　　為進(jìn)一步深入接觸聽(tīng)障群體，了解手語(yǔ)和優(yōu)化數(shù)據(jù)和識(shí)別算法，目前騰訊優(yōu)圖實(shí)驗(yàn)室已和深圳市信息無(wú)障礙研究會(huì)成立AI手語(yǔ)識(shí)別聯(lián)合項(xiàng)目組，雙方將基于手語(yǔ)數(shù)據(jù)采集、產(chǎn)品算法優(yōu)化等展開(kāi)長(zhǎng)期深度的合作，通過(guò)與聽(tīng)障者或手語(yǔ)使用者進(jìn)一步接觸，擴(kuò)充數(shù)據(jù)容量，完善數(shù)據(jù)規(guī)范，致力于推動(dòng)后續(xù)的產(chǎn)品和服務(wù)部署。

　　深圳市信息無(wú)障礙研究會(huì)秘書(shū)長(zhǎng)楊曄表示，騰訊優(yōu)圖提供的這項(xiàng)技術(shù)，可以在一定程度上緩解聽(tīng)障者的溝通障礙，為聽(tīng)障者提供更好的服務(wù)。

　　(優(yōu)圖和深圳信息無(wú)障礙研究會(huì)AI聽(tīng)障無(wú)障礙聯(lián)合項(xiàng)目組)

　　實(shí)際上，這并不是騰訊在AI+無(wú)障礙建設(shè)上的首次嘗試，騰訊一直在堅(jiān)持推動(dòng)“一個(gè)都不能少”和“信息無(wú)障礙”理念的傳播與落地。從2009年起，騰訊在信息無(wú)障礙方面率展開(kāi)探索，截至目前，旗下QQ、QQ空間、微信、騰訊網(wǎng)、騰訊新聞、應(yīng)用寶、企鵝FM等大部分產(chǎn)品已針對(duì)障礙用戶(hù)實(shí)現(xiàn)專(zhuān)門(mén)優(yōu)化。騰訊旗下各類(lèi)產(chǎn)品從社交、娛樂(lè)、新聞等多維度出發(fā)，共同努力，為障礙人士構(gòu)建友好的信息社會(huì)。2018年12月3日，獲得“聯(lián)合國(guó)教科文組織數(shù)字技術(shù)增強(qiáng)殘疾人權(quán)能獎(jiǎng)”。

　　根據(jù)世界衛(wèi)生組織的調(diào)查，全世界有超過(guò)十億人生活在因殘障引起的不便中，也就是說(shuō)，地球上每七個(gè)人中就約有一人需要無(wú)障礙設(shè)施的幫助。為了讓更多的人關(guān)注到這群殘障人士，每年五月的第三個(gè)星期四也被設(shè)立為了全球無(wú)障礙宣傳日。