EchoSpeech, kaikuluotainlasit, jotka seuraavat kasvojen liikkeitä ja takaavat hiljaisen viestinnän

Laseihin rakennettu kaikuluotainjärjestelmä suun liikkeiden lukemiseen on fiksu ja erittäin lupaava EchoSpeech-idea.

Cornellin yliopiston tutkija on kehittänyt kaikuluotainlasit, jotka voivat ”kuulla” sinut myös silloin, kun et puhu . Nämä lasit käyttävät pieniä mikrofoneja ja kaiuttimia lukemaan sanat, joita huulet sanovat äänettömästi, olipa kyseessä sitten kappaleen keskeyttäminen tai siirtyminen seuraavaan, salasanan syöttäminen koskematta puhelimeen, työskentely mallien kanssa, piirtäminen tietokoneella ilman näppäimistöä.

Luotainjärjestelmä suun liikkeiden lukemiseen lasiin sisäänrakennettuna.

Laitteen kehittänyt Ruidong Zhang aloitti samanlaisella projektilla, jossa käytettiin langattomia kuulokkeita ja aiempia malleja kameroilla. Silmälaseilla ei tarvitse käyttää kameroita tai käyttää jotain korvassa. ”Useimmat hiljaisen maailman tunnistustekniikat rajoittuvat ennalta määritettyihin komentoihin ja vaativat käyttäjää katsomaan kameraan tai pitämään sitä päällä, mikä ei ole aina käytännöllistä tai edes mahdollista”, Cornellin yliopiston apulaisprofessori Cheng Zhang selitti: ”Tuomme luotain ihmiskehoon.”

Tutkijat selittävät, että tämä järjestelmä kestää vain muutaman minuutin harjoittelun – kuten lukusarjan lukemisen – käyttäjän puhemallien oppimiseen. Sen jälkeen lasit ovat valmiita. Ne lähettävät ja vastaanottavat ääniaaltoja kasvoillesi havaitsemalla suun liikkeet ja käyttämällä syväoppimisalgoritmia kaikuprofiilien analysoimiseen reaaliajassa ”noin 95 % tarkkuudella”.

Järjestelmä tekee tämän delegoimalla tiedonkäsittelyn langattomasti älypuhelimeesi, jolloin lasit pysyvät erittäin huomaamattomina. Nykyinen versio tarjoaa noin 10 tunnin akunkeston akustista havaitsemista varten. Lisäksi puhelimestasi ei poistu mitään dataa. ”Olemme innoissamme tästä järjestelmästä, koska se antaa voimaa samalla kun se on tehokas ja kunnioittaa yksityisyyttä”, sanoi Cheng Zhang. ”Se on pieni, pienitehoinen ja yksityisyyttä kunnioittava, kaikki näkökohdat ovat erittäin tärkeitä uusien teknologioiden käyttöönotolle sen lisäksi, että se käyttäytyy todellisessa maailmassa.”

Älykäs ja erittäin lupaava idea EchoSpeech

Yksityisyys on erittäin tärkeää tosielämän käytössä. Esimerkiksi Ruidong Zhang ehdottaa näiden lasien käyttöä musiikin ohjaamiseen (ilman käsiä ja silmiä) kirjastossa tai viestin sanelemiseen kovaäänisen konsertin aikana, jossa muut menetelmät eivät toimisi. Mutta ehkä mielenkiintoisin skenaario olisi antaa puhevammaisille ihmisille mahdollisuus käydä dialogia äänisyntetisaattorin kanssa, jotta heidät kuullaan.

Jos kaikki menee hyvin, nämä pisteet pitäisi myydä. Cornellin Smart Computer Interfaces for Future Interactions (SciFi) -laboratorion tiimi tutkii mahdollisuutta tuoda tämä teknologia markkinoille Cornellin rahoitusohjelman kautta. He ovat myös kiinnostuneita yhdistetyistä silmälasisovelluksista, joilla seurataan kasvojen, silmien ja jopa ylävartalon liikkeitä. ”Uskomme, että silmälaseista tulee tärkeä henkilökohtainen tietojenkäsittelyalusta ihmisen toiminnan ymmärtämiseksi jokapäiväisessä elämässä”, sanoi Cheng Zhang.