EchoSpeech, sonāra aizsargbrilles, kas izseko sejas kustībām klusai saziņai

Brillēs iebūvētā sonāra sistēma mutes kustību nolasīšanai ir gudra un ļoti daudzsološa EchoSpeech ideja.

Kornela universitātes pētnieks ir izstrādājis hidrolokācijas aizsargbrilles, kas var jūs “dzirdēt” pat tad, kad nerunājat . Šīs brilles izmanto mazus mikrofonus un skaļruņus, lai nolasītu vārdus, ko klusi saka jūsu lūpas, neatkarīgi no tā, vai tā ir dziesmas pauze vai pāriešana uz nākamo, paroles ievadīšana, nepieskaroties tālrunim, vai darbs ar veidnēm, zīmēšana datorā bez tastatūras.

Sonāra sistēma brillēs iebūvēta mutes kustību nolasīšanai.

Ruidong Zhang, kurš izstrādāja ierīci, sāka ar līdzīgu projektu, kurā tika izmantotas bezvadu austiņas un iepriekšējie modeļi ar kamerām. Lietojot brilles, nav nepieciešams izmantot kameras vai valkāt kaut ko ausī. “Lielākā daļa atpazīšanas tehnoloģiju klusajā pasaulē aprobežojas ar iepriekš definētu komandu kopumu un pieprasa lietotājam ieskatīties kamerā vai valkāt to, kas ne vienmēr ir praktiski vai pat iespējams,” skaidroja Kornela universitātes docents Čens Džans: “Mēs ienesīsim sonāru cilvēka ķermenī.”

Pētnieki skaidro, ka šī sistēma aizņem tikai dažas minūtes prakses, piemēram, skaitļu sērijas nolasīšanas, lai uzzinātu lietotāja runas modeļus. Pēc tam brilles ir gatavas. Tie sūta un saņem skaņas viļņus uz jūsu sejas, nosakot jūsu mutes kustības un izmantojot dziļās mācīšanās algoritmu, lai reāllaikā analizētu atbalss profilus “ar aptuveni 95% precizitāti”.

Sistēma to dara, deleģējot datu apstrādi bezvadu režīmā viedtālrunim, ļaujot brillēm palikt ļoti diskrētām. Pašreizējā versija piedāvā aptuveni 10 stundu akumulatora darbības laiku akustiskai noteikšanai. Turklāt jūsu tālrunī netiek atstāti dati. “Mēs esam sajūsmā par šo sistēmu, jo tā sniedz iespējas, vienlaikus ir spēcīga un respektē privātumu,” sacīja Čens Džans. “Tas ir mazs, mazjaudas un cienošs pret privātumu, visi aspekti ir ļoti svarīgi jauno tehnoloģiju ieviešanā papildus uzvedībai reālajā pasaulē.”

Gudra un ļoti daudzsološa ideja EchoSpeech

Privātums ir ļoti svarīgs lietošanai reālajā pasaulē. Piemēram, Ruidong Zhang iesaka izmantot šīs brilles, lai vadītu mūziku (bez rokām un acīm) bibliotēkā vai diktētu ziņojumu skaļa koncerta laikā, kur citas metodes nedarbotos. Bet visinteresantākais scenārijs, iespējams, būtu ļaut cilvēkiem ar runas traucējumiem veidot dialogu ar balss sintezatoru, lai viņus varētu sadzirdēt.

Ja viss iet labi, šie punkti ir jāpārdod. Kornela viedo datoru saskarņu nākotnes mijiedarbības (SciFi) laboratorijas komanda pēta iespēju ieviest šo tehnoloģiju tirgū, izmantojot Kornela finansēšanas programmu. Viņus interesē arī savienotas briļļu lietotnes, lai izsekotu sejas, acu un pat ķermeņa augšdaļas kustībām. “Mēs uzskatām, ka brilles kļūs par svarīgu personālo skaitļošanas platformu, lai izprastu cilvēka darbības ikdienas dzīvē,” sacīja Čens Džans.