Questa fotocamera con collana può sentire i comandi vocali silenziosi
In quella che potrebbe rivelarsi un'importante svolta nell'accessibilità, un assistente professore della Cornell ha creato un dispositivo indossabile ispirato alla collana telecamerain grado di tracciare il movimento della pelle sul collo e sul viso senza alcun effettivo input audio. Il dispositivo è in realtà un'innovazione di terza generazione che si basa su altri due progetti straordinari. Il primo è stato C-Face, un auricolare che studia i contorni delle guance per tracciare le espressioni facciali e le traduce in emoji 3D e comandi vocali. La vetrina del 2020 di C-Face come dispositivo di tracciamento delle espressioni facciali minimamente invadente è stata seguita da un'altra fantastica invenzione chiamata NeckFace nell'agosto dello scorso anno.
NeckFace era un dispositivo di rilevamento indossabile a forma di collana che utilizzava telecamere IR per acquisire un'immagine del mento e del viso da sotto il collo. L'idea era di implementare la sua tecnologia di base per applicazioni come la visione di video senza una fotocamera frontale, il riconoscimento vocale silenzioso e il monitoraggio delle espressioni facciali nella realtà virtuale. L'idea sembra simile al presunto visore AR/VR di Apple che, secondo quanto riferito, consentirà agli utenti
SpeeChin è un dispositivo di riconoscimento vocale che elimina l'aspetto vocale dai comandi vocali. Nato da un'idea di Cheng Zhang, assistente professore di scienze dell'informazione presso la Cornell Ann S. Bowers College of Computing and Information Science, SpeeChin adotta il design della collana e fa affidamento su una telecamera IR per studiare le deformazioni che appaiono sul viso e sul collo quando un individuo parla. Apple impiega anche un telecamera a infrarossi nel suo sistema TrueDepth su iPhone per generare una mappa facciale 3D per l'autenticazione e la creazione di Animoji.
Discreto, ma significativo
Un obiettivo chiave di SpeeChin è che consente a una persona con disabilità vocale di imitare semplicemente il compito di pronunciare un comando vocale e il dispositivo traccerà effettivamente i movimenti per capire cosa è stato detto senza un udibile ingresso. "Questo dispositivo ha il potenziale per apprendere i modelli di discorso di una persona, anche con il parlato silenzioso", Zhang nota. Un altro scenario di casi d'uso è quando un individuo vuole per evocare Siri per svolgere un compito, ma l'ambiente circostante non è adatto per parlare ad alta voce al telefono o all'altoparlante. Ciò che è veramente impressionante è che Zhang ha costruito il dispositivo da solo a casa mentre gestiva i compiti accademici da remoto. È straordinario vedere che una tecnologia promettente come questa può essere così semplice nella sua ingegneria e potenzialmente più conveniente rispetto alle migliaia di dollari che i gadget come Cuffie Project Cambria di Facebook o il visore AR/VR di Apple si caricherà.
SpeeChin viene fornito con una fotocamera IR incollata su una piattaforma per collana stampata in 3D e una moneta è stata attaccata alla base per una maggiore stabilità. Un altro aspetto promettente del design di SpeeChin è la privacy. A differenza degli occhiali di Snap o Occhiali Ray-Ban Stories di Facebook che registra tutto (e ogni persona) nella vista della telecamera, l'orientamento sospeso di SpeeChin è adatto solo per registrare le espressioni facciali della persona che indossa la collana intelligente. Nei test, SpeeChin ha riconosciuto i comandi in inglese e mandarino con una precisione del 90,5% e del 91,6%, sebbene la precisione diminuisse quando il soggetto camminava. Non si sa se Zhang abbia trovato un partner per commercializzare l'idea o se il progetto sarà open source, ma il telecamera-basato sul dispositivo è ingegnoso e trarrebbe vantaggio da un'ampia versione.
Fonte: Cornell
L'infermiera afferma che Apple Watch ha avvertito di problemi di salute mesi prima della diagnosi
Circa l'autore