EchoSpeech, sonarové brýle, které sledují pohyby obličeje pro tichou komunikaci

Sonarový systém pro čtení pohybů úst zabudovaný do brýlí je chytrý a velmi slibný nápad EchoSpeech.

Výzkumník z Cornell University vyvinul sonarové brýle, které vás „slyší“, i když nemluvíte . Tyto brýle využívají malé mikrofony a reproduktory ke čtení slov, která tiše říkají vaše rty, ať už jde o pozastavení skladby nebo přeskočení na další, zadávání hesla, aniž byste se dotkli telefonu, nebo práci se šablonami, kreslení na počítači bez klávesnice.

Sonarový systém pro čtení pohybů úst zabudovaný do brýlí.

Ruidong Zhang, který zařízení vyvinul, začal s podobným projektem, který používal bezdrátová sluchátka a předchozí modely s kamerami. Používání brýlí eliminuje potřebu používat kamery nebo nosit něco v uchu. „Většina technologií rozpoznávání v tichém světě je omezena na sadu předdefinovaných příkazů a vyžaduje, aby se uživatel díval do kamery nebo ji nosil, což není vždy praktické nebo dokonce proveditelné,“ vysvětlil Cheng Zhang, odborný asistent na Cornell University: „Přineseme sonar do lidského těla.“

Výzkumníci vysvětlují, že tento systém trvá jen několik minut cvičení – například čtení řady čísel –, než se naučí řečové vzorce uživatele. Poté jsou sklenice připraveny. Vysílají a přijímají zvukové vlny na vaší tváři tím, že detekují pohyby vašich úst a používají algoritmus hlubokého učení k analýze profilů ozvěny v reálném čase „s přesností asi 95 %.

Systém to dělá tak, že bezdrátově deleguje zpracování dat na váš smartphone, díky čemuž brýle zůstanou velmi diskrétní. Aktuální verze nabízí cca 10 hodin výdrže baterie pro akustickou detekci. Z vašeho telefonu navíc neodcházejí žádná data. „Jsme nadšeni tímto systémem, protože posiluje a zároveň je výkonný a respektuje soukromí,“ řekl Cheng Zhang. „Je malý, má nízkou spotřebu a respektuje soukromí, všechny aspekty jsou velmi důležité pro nasazení nových technologií, kromě chování v reálném světě.“

Chytrý a velmi slibný nápad EchoSpeech

Soukromí je velmi důležité pro použití v reálném světě. Ruidong Zhang například navrhuje používat tyto brýle k ovládání hudby (bez rukou a očí) v knihovně nebo k diktování zprávy během hlasitého koncertu, kde by jiné metody nefungovaly. Nejzajímavějším scénářem by ale možná bylo umožnit lidem s poruchami řeči vést dialog s hlasovým syntetizérem, aby je bylo slyšet.

Pokud vše půjde dobře, měly by být tyto body prodány. Tým z Cornell’s Smart Computer Interfaces for Future Interactions (SciFi) Lab zkoumá možnost uvedení této technologie na trh prostřednictvím Cornellova programu financování. Zajímají je také aplikace připojených brýlí ke sledování pohybů obličeje, očí a dokonce i horní části těla. „Věříme, že se brýle stanou důležitou osobní počítačovou platformou pro pochopení lidských činností v každodenním životě,“ řekl Cheng Zhang.