Ova kamera za ogrlicu može čuti tihe glasovne naredbe

click fraud protection

U onome što bi se moglo pokazati kao veliki napredak u pristupačnosti, docent iz Cornella stvorio je nosivi uređaj inspiriran ogrlicom fotoaparatkoji može pratiti kretanje kože na vratu i licu bez stvarnog unosa zvuka. Uređaj je zapravo inovacija treće generacije koja se nadovezuje na dva druga izvanredna projekta. Prva je bila C-Face, slušalica koja proučava konture obraza kako bi pratila izraze lica i prevodila ih u 3D emojije i govorne naredbe. Izlog C-Facea 2020. kao minimalno nametljivog uređaja za praćenje izraza lica pratio je još jedan cool izum pod nazivom NeckFace u kolovozu prošle godine.

NeckFace je bio nosivi senzorski uređaj tipa ogrlice koji je koristio IR kamere za snimanje slike brade i lica ispod vrata. Ideja je bila implementirati svoju temeljnu tehnologiju za aplikacije kao što su gledanje videa bez prednje kamere, tiho prepoznavanje govora i praćenje izraza lica u virtualnoj stvarnosti. Ideja zvuči slično Appleovim AR/VR slušalicama koje će navodno omogućiti korisnicima

pohađati FaceTime pozive putem svog Memoji avatara. Sada se um iza C-Facea i NeckFacea vratio s još jednim obećavajućim uređajem.

SpeeChin je uređaj za prepoznavanje govora koji uklanja glasovni aspekt iz glasovnih naredbi. Zamisao Cheng Zhanga, docenta informacijskih znanosti u Cornell Ann S. Bowers College of Computing and Information Science, SpeeChin usvaja dizajn ogrlice i oslanja se na IR kameri za proučavanje deformacija koje se pojavljuju na licu i vratu kada pojedinac govori. Apple također zapošljava infracrvena kamera u svom TrueDepth sustavu na iPhone uređajima za generiranje 3D karte lica za provjeru autentičnosti i stvaranje Animojisa.

Podcijenjeno, ali smisleno

Sveučilište Cornell

Ključni cilj SpeeChin-a je da omogućuje osobi s glasovnim oštećenjem da samo oponaša zadatak izgovaranja glasovnu naredbu, a uređaj će zapravo pratiti pokrete kako bi razumio što je rečeno bez zvuka ulazni. "Ovaj uređaj ima potencijal naučiti govorne obrasce osobe, čak i uz tihi govor", Zhang napominje. Drugi scenarij korištenja je kada pojedinac želi da pozove Siri obaviti zadatak, ali okolina nije prikladna za glasno razgovaranje na telefon ili zvučnik. Ono što je uistinu impresivno je da je Zhang sam napravio uređaj kod kuće dok je akademske dužnosti obavljao na daljinu. Izvanredno je vidjeti da obećavajuća tehnologija poput ove može biti tako jednostavna u svom inženjeringu i potencijalno pristupačnija u usporedbi s tisućama dolara koje gadgeti poput Facebookove slušalice Project Cambria ili Appleove AR/VR slušalice navodno će se puniti.

SpeeChin dolazi s IR kamerom koja je zalijepljena na 3D ispisanu platformu ogrlice, a novčić je pričvršćen na bazu za dodatnu stabilnost. Još jedan obećavajući aspekt SpeeChinovog dizajna je privatnost. Za razliku od Snap's Spectacles ili Facebookove Ray-Ban Stories naočale koji bilježe sve (i svaku osobu) u prikazu kamere, SpeeChinova viseća orijentacija prikladna je samo za snimanje izraza lica osobe koja nosi pametnu ogrlicu. U testovima, SpeeChin je prepoznao engleski i mandarinski naredbe s točnošću od 90,5% i 91,6%, iako je točnost pala kada je ispitanik hodao. Nema riječi o tome je li Zhang pronašao partnera za komercijalizaciju ideje ili će projekt biti otvorenog koda, ali fotoaparat-bazirani uređaj je genijalan i imao bi koristi od širokog izdanja.

Izvor: Cornell

Medicinska sestra kaže da je Apple Watch upozoren na zdravstvene probleme mjesecima prije dijagnoze

O autoru