EchoSpeech, occhiali sonar che tracciano i movimenti facciali per una comunicazione silenziosa

Il sistema sonar per leggere i movimenti della bocca integrato negli occhiali è un’idea EchoSpeech intelligente e molto promettente.

Un ricercatore della Cornell University ha sviluppato degli occhiali sonar che possono “sentirti” anche quando non parli . Questi occhiali utilizzano piccoli microfoni e altoparlanti per leggere le parole che le tue labbra pronunciano silenziosamente, sia che si tratti di mettere in pausa una canzone o passare a quella successiva, di inserire una password senza toccare il telefono o di lavorare con i modelli, disegnando su un computer senza tastiera.

Sistema sonar per la lettura dei movimenti della bocca integrato negli occhiali.

Ruidong Zhang, che ha sviluppato il dispositivo, ha iniziato con un progetto simile che utilizzava cuffie wireless e modelli precedenti con fotocamere. L’uso degli occhiali elimina la necessità di utilizzare fotocamere o indossare qualcosa nell’orecchio. “La maggior parte delle tecnologie di riconoscimento nel mondo silenzioso sono limitate a una serie di comandi predefiniti e richiedono all’utente di guardare nella fotocamera o indossarla, il che non è sempre pratico o addirittura fattibile”, ha spiegato Cheng Zhang, assistente professore alla Cornell University: “Porteremo il sonar al corpo umano.”

I ricercatori spiegano che questo sistema richiede solo pochi minuti di pratica – come leggere una serie di numeri – per apprendere i modelli vocali dell’utente. Dopodiché, gli occhiali sono pronti. Inviano e ricevono onde sonore sul tuo viso rilevando i movimenti della tua bocca e utilizzando un algoritmo di deep learning per analizzare i profili eco in tempo reale “con circa il 95% di precisione”.

Il sistema lo fa delegando l’elaborazione dei dati in modalità wireless al tuo smartphone, consentendo agli occhiali di rimanere molto discreti. La versione attuale offre circa 10 ore di autonomia per il rilevamento acustico. Inoltre, nessun dato lascia il tuo telefono. “Siamo entusiasti di questo sistema perché potenzia pur essendo potente e rispettando la privacy”, ha affermato Cheng Zhang. “È piccolo, a basso consumo e rispettoso della privacy, tutti aspetti molto importanti per l’implementazione di nuove tecnologie, oltre al comportamento nel mondo reale.”

Idea intelligente e molto promettente EchoSpeech

La privacy è molto importante per l’uso nel mondo reale. Ad esempio, Ruidong Zhang suggerisce di utilizzare questi occhiali per controllare la musica (senza mani e occhi) in una biblioteca o per dettare un messaggio durante un concerto ad alto volume dove altri metodi non funzionerebbero. Ma lo scenario più interessante, forse, sarebbe quello di consentire alle persone con problemi di linguaggio di dialogare con un sintetizzatore vocale in modo che possano essere ascoltate.

Se tutto va bene, questi punti dovrebbero essere venduti. Un team dello Smart Computer Interfaces for Future Interactions (SciFi) Lab di Cornell sta esplorando la possibilità di portare questa tecnologia sul mercato attraverso il programma di finanziamento di Cornell. Sono anche interessati alle app per occhiali connessi per tracciare i movimenti del viso, degli occhi e persino della parte superiore del corpo. “Riteniamo che gli occhiali diventeranno un’importante piattaforma di personal computing per comprendere le attività umane nella vita quotidiana”, ha affermato Cheng Zhang.