La tecnologia dà potere alle persone cieche e ipovedenti. L’app Vhista creata dallo sviluppatore colombiano Juan David Cruz, scaricabile gratuitamente da Apple Store, è un ottimo esempio che dimostra che la tecnologia può avere un impatto positivo, utilizza l’apprendimento automatico per riconoscere e descrivere l’ambiente dell’utente utilizzando la fotocamera dell’iPhone.
Grazie a CoreML, l’app funziona anche senza una connessione Internet, una funzione molto utile per gli utenti con piani dati illimitati o che vivono in luoghi remoti. Vhista usa anche ARKit per dire agli utenti quanto sono vicini gli oggetti. E ogni volta che una persona si trova nelle vicinanze, vibra per avvisare l’utente.
Juan David Cruz sin dal primo momento è stato entusiasta dei primi risultati, sta già lavorando con Create ML per implementare nuovi miglioramenti alla sua app. La sua prossima sfida è creare l’app per il riconoscimento del denaro, è sicuro che sarà una funzionalità molto utile per le persone che hanno perso la vista.
Juan David Cruz intervistato da Publimetro ha parlato delle caratteristiche della sua app Vhista.
Cos’è Vhista e come funziona?
È un’applicazione progettata per aiutare le persone con cecità o ipovisione. Utilizzando il riconoscimento delle immagini e gli algoritmi di apprendimento, diventa un nuovo strumento per identificare oggetti come automobili, locali, cibo, paesaggi e altro, ma non è tutto, con la funzione di analisi facciale, l’app descrive le persone e predice persino le loro emozioni in base ai gesti facciali.
La persona punta semplicemente il cellulare e riceve una lettura ad alta voce di ciò che è stato identificato utilizzando la fotocamera.
Da dove è nata l’idea?
Tutto è iniziato su un autobus pensando al nostro paese. Guardare fuori dai finestrini e pensare alla disuguaglianza che esiste. La mancanza di opportunità per molti. Pensare che abbiamo bisogno di vivere in un Paese dove ci preoccupiamo di più degli altri. La Colombia è un paese in cui le auto non aspettano nemmeno che tu attraversi la strada. E insieme a quella ricerca per fare la mia parte, è emersa una tecnologia di riconoscimento delle immagini che, sebbene mi sembrasse interessante, non riuscivo a trovarne un uso pratico in quel momento, ma mi sono chiesto, e se aiutassi le persone con cecità o ipovisione ad avere uno strumento che aiuti a ridurre la disuguaglianza che abbiamo generato? Che ne dici se posso creare occhi digitali. E se questo fosse il mio piccolo granello di sabbia per mostrare alla Colombia e al mondo che possiamo essere migliori e che possiamo creare e innovare anche pensando all’altro e non solo a noi stessi? E così è nata l’idea di Vhista. L’unione della tecnologia che è emersa e la mia ricerca per costruire il Paese.
Quali sono le soluzioni proposte dall’applicazione Vhista?
Si tratta soprattutto di creare una nuova alternativa in modo che le persone che la utilizzano, abbiano un orientamento e una conoscenza di ciò che li circonda; a volte diamo per scontate cose basilari come il sapere come appare il nostro partner, ma il fatto che Vhista descriva persone e gesti, ha fatto sorridere molte persone e ha fatto persino lacrimare gli occhi di coloro che l’hanno utilizzata.
Quanto tempo hai impiegato per sviluppare l’app e come descrivi il processo?
Tutto è iniziato negli ultimi giorni di novembre. Ci ho lavorato fino al 6 gennaio 2017, quando è stato pubblicato per la prima volta sull’App Store, non ho dormito molto per un mese e due settimane, mi alzavo e andavo a letto senza lasciare il computer.
Ci parli della tua borsa di studio WWDC17
Ogni anno da quando sono uno sviluppatore, ho assistito a presentazioni e conferenze della WWDC. Non ne ho perso neanche uno dai tempi di Steve Jobs, non solo perché sono entusiasmanti e definiscono il mio futuro come sviluppatore, ma anche perché si impara molto.
WWDC è la conferenza annuale dei produttori di iPhone per sviluppatori, in cui app e produttori di giochi di tutto il mondo per una settimana partecipano a sessioni e scambiano note con oltre 1.000 ingegneri Apple; per ottenere la sovvenzione e avere l’opportunità di andare a conoscere tutte queste persone, ho dovuto sviluppare un’applicazione su Swift Playgrounds (Swift Playgrounds è un’applicazione per iPad per incoraggiare le persone a imparare a sviluppare nel linguaggio di programmazione Swift). Ci è stato dato poco tempo, abbiamo dovuto creare un’esperienza in cui i giudici potessero vedere le nostre capacità creative, di progettazione e di programmazione. Ho sviluppato un’applicazione chiamata “A Bit of Humanity” (Un po’ di umanità). L’intenzione era di mostrare come dietro ogni Paese, dietro ogni persona, dietro ogni professione, ci sono persone reali, con storie reali e che hanno idee su come la tecnologia può migliorare il mondo. Ho fatto un’applicazione che mostra le persone in foto a 180 gradi, si può leggere e sentire come credono che la tecnologia possa cambiare e migliorare la Colombia e il mondo. Ho fotografato, tra gli altri, un inserviente, un dentista, un artista. Volevo mostrare la pluralità delle persone e dei loro pensieri; senza saperlo si adatta perfettamente alla WWDC, dove la diversità è stata molto importante quest’anno. Ho potuto incontrare persone del gruppo dell’accessibilità che mi hanno dato consigli e aiuto con Vhista, per esempio. Essere lì non è come guardare i video su internet, ci sono sessioni esclusivamente per le persone che creano tutto questo e che ti aiutano a migliorare quello che fai.
Come ci si sente a vedere che la tua applicazione è stata evidenziata in diversi negozi dell’America Latina?
La cosa più importante per me è che posso raggiungere più persone che so che saranno aiutate dalla mia applicazione. Ho una recensione sull’App Store che dice: “Hai cambiato la vita di mio figlio”. Solo messaggi come questo rendono il tutto utile. Sono contento e pieno della consapevolezza che questa caratteristica mi permette di raggiungere quelle persone che da solo non potrei mai raggiungere. Sapere che sono stato presente in molti paesi ed ero in cima alla sezione Lifestyle dell’App Store, anche al di sopra di app come Tinder (Rank 2) è indescrivibile. Mi lascia solo la curiosità di sapere cosa sta per succedere. Continuerò a lavorare per aiutare migliaia e migliaia di persone.
Che cosa è ARKit e come funziona nell’app?
ARKit è una tecnologia che consente agli sviluppatori di creare app di realtà aumentata immersive per dispositivi iOS. Ci permette di catturare nella nostra realtà, oggetti che non ci sono veramente. Usare la telecamera e proiettare nell’ambiente tutto ciò che vogliamo proiettare, per esempio, proiettare un dinosauro nella nostra stanza che possiamo vedere solo sullo schermo del nostro cellulare, ma non nella realtà della nostra stanza. ARKit ha molte altre caratteristiche, una delle quali è la capacità di riconoscere spazi, muri e distanze. Ciò per poter proiettare correttamente gli oggetti.
L’app funziona senza internet?
Permette un riconoscimento immediato e senza Internet. L’utente può azionare il suo cellulare, puntare la macchina fotografica e ottenere immediatamente approssimazioni degli oggetti che si trovano davanti a lui. L’app ha anche un’altra funzione che se si utilizza Internet, questa è più precisa e descrive l’intero panorama catturato dalla telecamera. L’app potrebbe dirvi: “Nell’immagine ho trovato auto, strada, erba, paesaggio, semaforo, attraversamento. Ho trovato nell’immagine una donna, che ha gli occhiali, questa persona è sorpresa”. Allora potreste immaginare dove siete e cosa avete davanti a voi. Compresa una donna che potrebbe attraversare la strada.
