Abhishek Singh pone una semplice domanda:se la voce è il futuro dell'informatica, che dire di coloro che non possono sentire? Alexa è tutto orecchi per la comunità dei non udenti grazie a un prototipo di app che senza dubbio attirerà interesse e ispirazione.

Dopotutto, gli esperti che osservano la tecnologia hanno affermato che la tecnologia vocale figura bene nel nostro futuro informatico; come ha detto BBC News, "Gli ultimi anni hanno visto un aumento della popolarità degli assistenti vocali gestiti da Amazon, Google e Apple".

Grazie ad Abhishek Singh, Alexa può rispondere al linguaggio dei segni. Vuoi aggiungere le uova alla tua lista della spesa? Hai bisogno di sapere se sta piovendo a Manhattan? Nessun problema, Alexa può rispondere a queste domande per coloro che non possono parlare abbastanza chiaramente o sentire.

L'ingegnoso progetto di Singh prevedeva un sistema basato su telecamera. Aveva pensato che sarebbe stato necessario progettare i dispositivi domestici pensando agli utenti non udenti. Di conseguenza, ha truccato l'Alexa di Amazon, ha detto la BBC, per rispondere tramite testo alla lingua dei segni americana (ASL).

Singh ha detto ai visitatori di YouTube in un video che mostra la sua lingua dei segni in azione che ha utilizzato il deep learning con TensorFlow.js per far sì che Amazon Echo risponda alla lingua dei segni.

Nello specifico, come ha notato la BBC, "Lo sviluppatore ha addestrato un'intelligenza artificiale utilizzando la piattaforma di apprendimento automatico Tensorflow, che ha comportato gesti ripetuti davanti a una webcam per insegnare al sistema le basi della lingua dei segni."

Una volta che il sistema è stato in grado di rispondere ai suoi movimenti della mano, lo ha collegato al software di sintesi vocale di Google per leggere ad alta voce le parole corrispondenti.

Singh ha detto che all'inizio, "Come esperimento mentale, Ho usato il deep learning per far sì che AIexa risponda alla lingua dei segni."

La fotocamera interpreta i segni dell'utente. I segni vengono convertiti in testo e parlato. "Alexa, Ciao, " esce forte e chiaro. "Ciao, là." "Alexa, che tempo fa?" "In questo momento a New York ci sono 29 gradi Celsius con cielo parzialmente soleggiato. Le previsioni di oggi hanno molte nuvole..." "Alexa, quanto sono cinque piedi in metri?" "Cinque piedi sono 1,5 metri." E così via. E cosa sarebbe un resoconto di sessione senza una richiesta di scherzo:"Alexa, dimmi una barzelletta." Non lo ripeterò, solo perché è zoppo. Su quella nota (non posso biasimarlo) Abhishek ha detto "Alexa, addio."

La domanda è, il suo prototipo potrebbe avere qualche influenza sul futuro degli assistenti vocali? La BBC ha citato Singh dicendo che non c'era motivo per cui Amazon Show "o qualsiasi assistente vocale basato su telecamera e schermo non potesse integrare questa funzionalità".

Azienda veloce citato Singh:"In un mondo ideale l'avrei costruito direttamente sullo Show, ma i dispositivi non sono ancora così hackerabili, così non riusciva a trovare un modo per farlo".

Marco Wilson, uno scrittore anziano presso Azienda veloce , nel frattempo, ha detto Singh "approverà il proprio codice e condividerà l'intera metodologia dietro di esso".

Ha detto che Singh sperava che altre persone potessero costruirci sopra, o anche solo "essere ispirato a esplorare questo spazio problematico". Wilson ha fatto un breve riassunto di come i sordi sono stati lasciati indietro nella corsa ai geni per presentare gli assistenti vocali. Wilson ha detto che il problema era duplice.

"Questi dispositivi non hanno mai imparato a decifrare le voci parlate di persone con problemi di udito estremi. Allo stesso tempo, qualsiasi cosa che Home o Alexa dicono in risposta non può essere ascoltata dall'utente. L'aggiunta di uno schermo per visualizzare le informazioni su un dispositivo come Echo Show potrebbe essere d'aiuto, ma può portare qualcuno così lontano solo se vuole avere una conversazione naturale con una macchina."

KnowTechie l'ha definita una soluzione "elegante" e ha affermato che "È fantastico vedere che gli sviluppatori si stanno impegnando per l'accessibilità, ma sarebbe bello vedere questo built-in."

© 2018 Tech Xplore