EchoSpeech,聲納護目鏡,可跟踪面部運動以進行無聲通信
內置於眼鏡中的用於讀取嘴部動作的聲納系統是一個聰明且非常有前途的 EchoSpeech 想法。
康奈爾大學的一位研究人員開發出了聲納護目鏡,即使您不說話也能“聽到”您的聲音。這些眼鏡使用小型麥克風和揚聲器來讀取您嘴唇默默說出的單詞,無論是暫停一首歌還是跳到下一首,在不觸摸手機的情況下輸入密碼,或者使用模板,在沒有鍵盤的計算機上繪圖。
內置於眼鏡中的用於讀取嘴部運動的聲納系統。
該設備的開發者張瑞東開始了一個類似的項目,該項目使用無線耳機和以前帶攝像頭的型號。使用眼鏡就無需使用相機或在耳朵裡戴東西。康奈爾大學助理教授張成解釋說:“無聲世界中的大多數識別技術僅限於一組預定義的命令,並要求用戶看著攝像頭或佩戴它,這並不總是實用甚至可行。” “我們將把聲納帶入人體。”
研究人員解釋說,該系統只需要幾分鐘的練習(例如閱讀一系列數字)即可了解用戶的語音模式。之後,眼鏡就準備好了。它們通過檢測您嘴巴的運動並使用深度學習算法實時分析迴聲輪廓,在您的臉上發送和接收聲波,“準確度約為 95%”。
該系統通過將數據處理無線委託給您的智能手機來實現這一點,從而使眼鏡保持非常謹慎。當前版本可為聲學檢測提供約 10 小時的電池續航時間。此外,您的手機不會留下任何數據。“我們對這個系統感到興奮,因為它在強大的同時又尊重隱私,”張成說。“它體積小、功耗低、尊重隱私,除了在現實世界中表現之外,所有方面對於新技術的部署都非常重要。”
聰明且非常有前途的想法 EchoSpeech
隱私對於現實世界的使用非常重要。例如,張瑞東建議使用這些眼鏡來控製圖書館中的音樂(無需手和眼睛),或者在吵鬧的音樂會期間口述信息,而其他方法不起作用。但最有趣的場景也許是讓有語言障礙的人與語音合成器進行對話,以便可以聽到他們的聲音。
如果一切順利,這些積分應該被出售。康奈爾大學未來交互智能計算機接口(科幻)實驗室的一個團隊正在探索通過康奈爾大學的資助計劃將該技術推向市場的可能性。他們還對連接眼鏡應用程序感興趣,以跟踪面部、眼睛甚至上半身的運動。“我們相信眼鏡將成為了解人類日常生活活動的重要個人計算平台,”張成說。
發佈留言