See kaelakeekaamera kuuleb vaikseid häälkäsklusi

Mis võib osutuda oluliseks juurdepääsetavuse läbimurdeks, on Cornelli abiprofessor loonud kaelakeest inspireeritud kantava rõiva kaameramis suudab jälgida naha liikumist kaelal ja näol ilma tegeliku helisisendita. Seade on tegelikult kolmanda põlvkonna uuendus, mis põhineb veel kahel märkimisväärsel projektil. Esimene neist oli C-Face, kõrvaklapp, mis uurib näoilmete jälgimiseks põskede kontuure ja tõlgib need 3D-emotikonideks ja kõnekäskudeks. 2020. aasta C-Face'i kui minimaalselt pealetükkiva näoilme jälgimisseadme esitlemisele järgnes eelmise aasta augustis veel üks lahe leiutis nimega NeckFace.

NeckFace oli kaelakee-tüüpi kantav andur, mis kasutas infrapunakaameraid, et jäädvustada lõua ja näo kujutis kaela alt. Idee oli juurutada selle põhitehnoloogia selliste rakenduste jaoks nagu videote vaatamine ilma esikaamerata, vaikne kõnetuvastus ja näoilmete jälgimine virtuaalses reaalsuses. Idee kõlab sarnaselt Apple'i kuulujutud AR/VR-peakomplektiga, mis väidetavalt kasutajatele lubab osaleda FaceTime'i kõnedes oma Memoji avatari kaudu

. Nüüd on C-Face'i ja NeckFace'i mõistus tagasi uue paljutõotava seadmega.

SpeeChin on kõnetuvastusseade, mis eemaldab häälkäsklustest häälaspekti. Cornell Ann S. infoteaduse abiprofessori Cheng Zhangi vaimusünnitus. Bowersi andmetöötlus- ja infoteaduste kolledž SpeeChin võtab kaelakee disaini ja tugineb IR-kaameral, et uurida inimese näol ja kaelal ilmnevaid deformatsioone räägib. Apple töötab ka infrapunakaamera oma TrueDepth süsteemis iPhone'ides, et luua autentimiseks ja Animojise loomiseks 3D näokaart.

Alahinnatud, kuid tähendusrikas

SpeeChini põhieesmärk on see, et see võimaldab häälepuudega inimesel lihtsalt matkida häälkõne ülesannet. häälkäsklus ja seade jälgib liigutusi, et mõista, mida öeldi ilma helisignaalita sisend. "Sellel seadmel on potentsiaal õppida inimese kõnemustreid isegi vaikse kõne korral." Zhang märgib. Teine kasutusstsenaarium on see, kui üksikisik seda soovib Siri välja kutsuma ülesande täitmiseks, kuid ümbrus ei sobi valjult telefoni või kõlariga rääkimiseks. Tõeliselt muljetavaldav on see, et Zhang ehitas seadme iseseisvalt kodus, täites samal ajal akadeemilisi ülesandeid eemalt. On tähelepanuväärne näha, et selline paljutõotav tehnoloogia võib olla oma tehniliselt nii lihtne ja potentsiaalselt taskukohasem, võrreldes tuhandete dollaritega, mis vidinatele meeldivad. Facebooki Project Cambria peakomplekt või Apple'i AR/VR-peakomplekt laeb väidetavalt.

SpeeChiniga on kaasas IR-kaamera, mis on liimitud 3D-prinditud kaelakee platvormile ja stabiilsuse suurendamiseks on aluse külge kinnitatud münt. SpeeChini disaini teine ​​paljutõotav aspekt on privaatsus. Erinevalt Snapi prillidest või Facebooki Ray-Ban Stories prillid mis salvestavad kõik (ja kõik inimesed) kaameravaates, sobib SpeeChini rippuv asend ainult nutikaelakeed kandva inimese näoilmete salvestamiseks. Testides tundis SpeeChin ära inglise ja mandariini keele käsud 90,5% ja 91,6% täpsusega, kuigi katsealuse kõndimisel täpsus langes. Pole ühtegi sõna selle kohta, kas Zhang on leidnud partneri idee kommertsialiseerimiseks või kas projekt on avatud lähtekoodiga, kuid kaamera-põhine seade on geniaalne ja kasuks tuleks laialdasest väljalasest.

Allikas: Cornell

Õde ütleb, et Apple Watch hoiatas terviseprobleemide eest kuid enne diagnoosi

Autori kohta