智能手語溝通系統(tǒng)與聾啞人無障礙交流
南京理工大學(xué)陳德毅團(tuán)隊(duì)在一次社會實(shí)踐中,接觸到了一群聾啞兒童,萌發(fā)了發(fā)明一款能與聾啞人正常交流的軟件的想法。他們最終開發(fā)了一套無障礙手語溝通系統(tǒng),為無聲世界賦予有聲夢想。
該系統(tǒng)實(shí)現(xiàn)了軟硬件結(jié)合,硬件上,由頭戴式設(shè)備上的紅外攝像頭,來追蹤和捕捉手勢動作,軟件上,自主研發(fā)的希聲APP,經(jīng)過在手機(jī)上的語音錄入和圖片顯示,實(shí)現(xiàn)自然語言與手語語言的雙向互譯。通過“希聲”,聽障人士的手勢信息被雙紅外攝像頭采集,經(jīng)翻譯模塊翻譯成對應(yīng)語音,供正常人理解,而正常人則對著手機(jī)說出想說的話,經(jīng)語音識別后翻譯成對應(yīng)的手語圖像,供聽障人士理解,以此實(shí)現(xiàn)二者的雙向交流。

