亞馬遜Alexa改造 可識(shí)別手語(yǔ)并給出屏幕文本反饋

原標(biāo)題：亞馬遜Alexa改造 可識(shí)別手語(yǔ)并給出屏幕文本反饋

語(yǔ)音識(shí)別技術(shù)已經(jīng)在智能手機(jī)、智能家居、以及一些新奇的小工具上得到了普遍的使用，但是對(duì)于那些無(wú)法正常通過(guò)語(yǔ)音進(jìn)行交互的殘障人士來(lái)說(shuō)，難道就沒(méi)有辦法與之交互了嗎？好消息是，軟件開(kāi)發(fā)者 Abhishek Singh，剛剛演示了一款能夠理解手語(yǔ)手勢(shì)的 MOD —— 通過(guò)攝像頭的捕捉和深度學(xué)習(xí)，讓亞馬遜 Alexa 也能夠?qū)κ终Z(yǔ)手勢(shì)作出反饋。

這套系統(tǒng)的組成很是簡(jiǎn)單，充分利用了筆記本電腦上的網(wǎng)絡(luò)攝像頭、現(xiàn)成的亞馬遜 Echo 智能揚(yáng)聲器、以及一些深度學(xué)習(xí)技術(shù)。它能夠解碼 Singh 的手勢(shì)，然后用語(yǔ)音 + 屏幕文本來(lái)回答查詢(xún)。

Singh 在接受 TheVerge 采訪時(shí)表示，后端用到了谷歌的 FensorFlow（特別是 TensorFlow.js）來(lái)提升實(shí)際使用體驗(yàn)。由于無(wú)法找到線(xiàn)上手語(yǔ)數(shù)據(jù)集，他必須自建一組基本信號(hào)，并對(duì)軟件展開(kāi)訓(xùn)練。

Making Amazon Alexa respond to Sign Language using AI（ via ）

幾天前，亞馬遜推出了新版 Echo Show，可以利用設(shè)備上集成的觸屏進(jìn)行命令輸入，以便失聲者與之交互。其建立在一個(gè)名為 Alexa Captioning 的現(xiàn)有功能基礎(chǔ)上，可在兼容設(shè)備的屏幕上顯示響應(yīng)。

盡管 Singh 的演示只是一個(gè)概念驗(yàn)證，但他已計(jì)劃將代碼開(kāi)源、并發(fā)表一篇博客文章來(lái)概述自己的工作。Singh 表示，任何其它配備了攝像頭和屏幕的智能設(shè)備廠商，都該立即著手這方面的工作。

關(guān)鍵詞： 亞馬遜 攝像頭 手語(yǔ)