NaviSense: presentata l'app basata sull'AI che aiuta i non vedenti

Una ricerca condotta presso Penn State ha portato allo sviluppo di NaviSense, un’applicazione innovativa che rappresenta un significativo passo avanti nel campo dell’accessibilità per le persone con disabilità visiva.

Dodici partecipanti ai test hanno confermato risultati promettenti: tempi più rapidi e precisione superiore rispetto alle soluzioni commerciali esistenti. Questa app promette di trasformare radicalmente il modo in cui le persone cieche e ipovedenti interagiscono con gli oggetti quotidiani, combinando riconoscimento oggetti in tempo reale, comandi vocali e feedback sensoriali avanzati.

Il progetto rappresenta un esempio eccellente di ricerca incentrata sull’utente. I ricercatori hanno intervistato persone con disabilità visiva per comprendere le loro necessità concrete, trasformando questi insegnamenti in funzionalità specifiche dell’applicazione. L’esperienza di un partecipante cattura perfettamente il valore della soluzione: “Mi piace il fatto che dia suggerimenti sulla posizione, poi bullseye, boom, ce l’hai”. Questo feedback diretto dalla comunità ha guidato ogni fase dello sviluppo, garantendo che la tecnologia rispondesse veramente ai bisogni reali degli utenti.

Come funziona NaviSense

Il funzionamento di NaviSense si basa su un’architettura tecnologica sofisticata e ben congegnata. L’utente pronuncia il nome di un oggetto, e l’app analizza il flusso video della fotocamera per restituire indicazioni direzionali attraverso audio spaziale e vibrazione tattile.

Quando la mano raggiunge il bersaglio corretto, un segnale di conferma comunica il successo dell’operazione. Tutto questo grazie all’elaborazione su server remoti che impiegano modelli LLM (Large Language Models) e VLM (Vision Language Models) per interpretare simultaneamente immagini e comandi vocali con straordinaria precisione.

Ciò che distingue questa tecnologia è la sua notevole capacità di adattamento agli ambienti diversi. Non richiede modelli pre-addestrati o mappature ambientali specifiche per funzionare efficacemente. Cucine, marciapiedi, negozi, spazi pubblici e privati: il sistema si adatta e funziona in svariati contesti senza necessità di configurazioni dedicate o setup preliminari. L’app inoltre monitora i movimenti della mano attraverso l’accelerometro dello smartphone e può porre domande di chiarimento quando le richieste vocali risultano ambigue, aumentando così l’accuratezza complessiva dell’interazione.

I dubbi sullo strumento

Tuttavia, lo sviluppo della tecnologia solleva questioni critiche che meritano attenta considerazione. La dipendenza da connessioni cloud pone interrogativi legittimi sulla privacy e sul trattamento dei dati visivi e vocali sensibili. Inoltre, l’efficienza energetica rimane una sfida concreta: il consumo intensivo della batteria potrebbe limitare significativamente l’usabilità durante periodi di utilizzo prolungato. In aree caratterizzate da connettività scarsa o instabile, le prestazioni dell’applicazione potrebbero degradarsi notevolmente, riducendo l’affidabilità della soluzione.

Gli esperti del settore dell’accessibilità richiedono giustamente ulteriori validazioni approfondite: campioni di test più ampi e diversificati, valutazioni robuste in condizioni reali variabili e verifiche specifiche per diverse tipologie di deficit visivi. Il team di Penn State dichiara di lavorare attivamente su questi fronti critici, affermando che la tecnologia è “molto vicina al rilascio commerciale”.