Home Notizie recenti I tuoi occhi possono controllare il tuo smartphone tramite il nuovo strumento...

I tuoi occhi possono controllare il tuo smartphone tramite il nuovo strumento di tracciamento dello sguardo

50
0

Credito: Pixabay/CC0 di dominio pubblico

Man mano che sempre più persone guardano film, modificano video, leggono le notizie e tengono il passo con i social media sui propri smartphone, questi dispositivi sono cresciuti per adattarsi agli schermi più grandi e alla maggiore potenza di elaborazione necessaria per le attività più impegnative.

Il problema con i telefoni ingombranti è che spesso richiedono una lancetta dei secondi o comandi vocali per funzionare, il che può essere ingombrante e scomodo.

In risposta, i ricercatori del Future Interfaces Group presso lo Human-Computer Interaction Institute (HCII) della Carnegie Mellon University stanno sviluppando uno strumento chiamato EyeMU, che consente agli utenti di eseguire operazioni su uno smartphone combinando il controllo dello sguardo e semplici gesti delle mani.

“Ci siamo posti la domanda: ‘C’è un meccanismo più naturale da utilizzare per interagire con il telefono?’ E il precursore di gran parte di ciò che facciamo è guardare qualcosa”, ha affermato Karan Ahuja, uno studente di dottorato in interazione uomo-computer.

L’analisi e la previsione dello sguardo non sono nuove, ma raggiungere un livello accettabile di funzionalità su uno smartphone sarebbe un progresso degno di nota.

“Gli occhi hanno quello che chiamereste il problema del tocco di Midas”, ha affermato Chris Harrison, professore associato presso l’HCII e direttore del Future Interfaces Group. “Non puoi avere una situazione in cui succede qualcosa al telefono ovunque guardi. Si aprirebbero troppe applicazioni”.

Un software che traccia gli occhi con precisione può risolvere questo problema. Andy Kong, un laureato in informatica, era interessato alle tecnologie di eye-tracking sin da quando è arrivato per la prima volta alla CMU. Ha trovato le versioni commerciali costose, quindi ha scritto un programma che utilizzava la fotocamera integrata di un laptop per tracciare gli occhi dell’utente, che a sua volta spostava il cursore sullo schermo, un importante passo iniziale verso EyeMU.

“I telefoni attuali rispondono solo quando chiediamo loro delle cose, sia con la voce, i tocchi o i clic dei pulsanti”, ha affermato Kong. “Se il telefono è ampiamente utilizzato ora, immagina quanto sarebbe più utile se potessimo prevedere ciò che l’utente desidera analizzando lo sguardo o altri dati biometrici”.

Non è stato facile semplificare il pacchetto in modo che potesse funzionare velocemente su uno smartphone.

“Questo è un vincolo di risorse. Devi assicurarti che i tuoi algoritmi siano abbastanza veloci”, ha detto Ahuja. “Se ci vuole troppo tempo, il tuo occhio si muoverà.”

Kong, l’autore principale del documento, ha presentato i risultati del team con Ahuja, Harrison e l’assistente professore dell’HCII Mayank Goel all’ultimo anno Conferenza internazionale sull’interazione multimodale. Avere un documento sottoposto a revisione paritaria accettato a un’importante conferenza è stato un enorme risultato per Kong, un ricercatore universitario.

Kong e Ahuja hanno avanzato quel primo prototipo utilizzando lo strumento Face Mesh di Google per studiare i modelli di sguardo degli utenti che guardano diverse aree dello schermo e renderizzare i dati di mappatura. Successivamente, il team ha sviluppato un predittore dello sguardo che utilizza la fotocamera frontale dello smartphone per bloccare ciò che lo spettatore sta guardando e registrarlo come bersaglio.

Il team ha reso lo strumento più produttivo combinando il predittore dello sguardo con i sensori di movimento integrati dello smartphone per abilitare i comandi. Ad esempio, un utente potrebbe guardare una notifica abbastanza a lungo da proteggerla come destinazione e scorrere il telefono verso sinistra per ignorarla o verso destra per rispondere alla notifica. Allo stesso modo, un utente potrebbe avvicinare il telefono per ingrandire un’immagine o allontanare il telefono per disattivare il controllo dello sguardo, il tutto tenendo un grande cappuccino nell’altra mano.

“Le grandi aziende tecnologiche come Google e Apple si sono avvicinate abbastanza alla previsione dello sguardo, ma il solo guardare qualcosa da solo non ti porta lì”, ha detto Harrison. “La vera innovazione in questo progetto è l’aggiunta di una seconda modalità, come far scorrere il telefono a sinistra o a destra, combinata con la previsione dello sguardo. Questo è ciò che lo rende potente. Sembra così ovvio in retrospettiva, ma è un’idea intelligente che rende EyeMU molto più intuitivo.”


Articolo precedenteAlcuni casi di COVID-19 lungo possono essere causati da un sistema immunitario anormalmente soppresso
Articolo successivoSensori di ossigeno spinale—SOS—sensori critici per quando il corpo ha ossigeno basso o nullo