Ez a nyakláncos kamera hallja a néma hangutasításokat
A kisegítő lehetőségek terén jelentős áttörésnek bizonyulhat, egy Cornell adjunktus megalkotta a nyaklánc ihlette viselet kameraamely tényleges hangbemenet nélkül képes követni a bőr mozgását a nyakon és az arcon. Az eszköz valójában egy harmadik generációs innováció, amely két másik figyelemre méltó projektre épül. Az első a C-Face volt, egy fülhallgató, amely az arc kontúrjait tanulmányozza az arckifejezések nyomon követése érdekében, és azokat 3D hangulatjelekké és beszédparancsokká alakítja. A C-Face 2020-as bemutatóját, mint egy minimálisan tolakodó arckifejezés-követő eszközt, egy másik menő találmány követte, a NeckFace tavaly augusztusban.
A NeckFace egy nyaklánc-típusú, hordható érzékelőeszköz volt, amely infravörös kamerákat alkalmazott, hogy képet készítsen az állról és az arcról a nyak alól. Az ötlet az volt, hogy az alapvető technológiát olyan alkalmazásokhoz alkalmazzák, mint például a videók előlapi kamera nélküli megtekintése, a néma beszédfelismerés és az arckifejezések követése a virtuális valóságban. Az ötlet hasonló az Apple pletykázott AR/VR headsetejéhez, amely állítólag lehetővé teszi a felhasználók számára
SpeeChin egy beszédfelismerő eszköz, amely kiveszi a hangaspektust a hangutasításokból. Cheng Zhang, a Cornell Ann S. információtudományi adjunktusa. A Bowers College of Computing and Information Science, SpeeChin elfogadja a nyaklánc kialakítását és támaszkodik infravörös kamerán, hogy tanulmányozza az egyén arcán és nyakán megjelenő deformációkat beszél. Az Apple is alkalmaz egy infravörös kamera a TrueDepth rendszerében iPhone készülékeken 3D arctérkép létrehozásához a hitelesítéshez és az Animojis létrehozásához.
Visszafogott, de értelmes
A SpeeChin egyik fő célja, hogy lehetővé tegye a hangkárosult személy számára, hogy csak utánozza a hangkimondás feladatát. hangutasítás, és a készülék ténylegesen nyomon követi a mozdulatokat, hogy hallás nélkül megértse az elhangzottakat bemenet. "Ez az eszköz képes megtanulni egy személy beszédmintáját, még néma beszéd esetén is" Zhang megjegyzi. Egy másik használati eset az, amikor az egyén akarja hogy megidézze Sirit feladat elvégzésére, de a környezet nem alkalmas arra, hogy valaki hangosan beszéljen a telefonnal vagy a hangszóróval. Ami igazán lenyűgöző, az az, hogy Zhang egyedül építette meg az eszközt otthon, miközben távolról látta el a tudományos feladatokat. Figyelemreméltó látni, hogy egy ilyen ígéretes technológia olyan egyszerű lehet a tervezésében, és potenciálisan megfizethetőbb is a kütyükhöz hasonló több ezer dollárhoz képest. A Facebook Project Cambria fejhallgatója vagy az Apple AR/VR fejhallgatója állítólag tölteni fog.
A SpeeChin infravörös kamerával érkezik, amely egy 3D-nyomtatott nyaklánc platformra van ragasztva, és egy érme került az alapra a nagyobb stabilitás érdekében. A SpeeChin tervezésének másik ígéretes szempontja a magánélet. Ellentétben a Snap’s Spectacles ill A Facebook Ray-Ban Stories szemüvege amelyek mindent (és minden embert) rögzítenek a kamera nézetében, a SpeeChin függő tájolása csak az okos nyakláncot viselő személy arckifejezésének rögzítésére alkalmas. A tesztek során a SpeeChin 90,5%-os és 91,6%-os pontossággal ismerte fel az angol és a mandarin parancsokat, bár a pontosság csökkent, amikor az alany járt. Arról nincs hír, hogy Zhang talált-e partnert az ötlet kereskedelmi hasznosítására, vagy a projekt nyílt forráskódú lesz, de kamera-alapú eszköz zseniális, és előnyös lenne a széles körű kiadás.
Forrás: Cornell
A nővér szerint az Apple Watch már hónapokkal a diagnózis felállítása előtt egészségügyi problémákra figyelmeztetett
A szerzőről