このネックレスカメラはサイレントボイスコマンドを聞くことができます
コーネル大学の助教授は、アクセシビリティの大きな進歩となる可能性があるものの中で、ネックレスに着想を得たウェアラブルを作成しました。 カメラ実際の音を入力しなくても、首や顔の皮膚の動きを追跡できます。 このデバイスは、実際には、他の2つの注目すべきプロジェクトに基づいた第3世代のイノベーションです。 最初のものはC-Faceでした。これは、頬の輪郭を調べて顔の表情を追跡し、それらを3D絵文字と音声コマンドに変換するイヤホンです。 最小限の目立たない表情追跡デバイスとしてのC-Faceの2020年のショーケースに続いて、昨年8月にNeckFaceと呼ばれる別のクールな発明が行われました。
NeckFaceは、首の下から顎と顔の画像をキャプチャするためにIRカメラを配備したネックレスタイプのウェアラブルセンシングデバイスでした。 アイデアは、正面カメラなしでビデオに参加する、サイレント音声認識、バーチャルリアリティでの顔の表情の追跡などのアプリケーションにコアテクノロジーを導入することでした。 このアイデアは、Appleの噂のAR / VRヘッドセットに似ているように聞こえます。これにより、ユーザーは Memojiアバターを介してFaceTime通話に参加する. 今、C-FaceとNeckFaceの背後にある心は別の有望なデバイスで戻ってきました。
SpeeChin は、音声コマンドから音声の側面を取り除く音声認識デバイスです。 Cornell AnnSの情報科学の助教授であるChengZhangの発案によるものです。 Bowers College of Computing and Information Science、SpeeChinはネックレスのデザインを採用し、 個人が顔や首に現れる変形を研究するためにIRカメラで 話す。 アップルはまた、 TrueDepthシステムの赤外線カメラ iPhoneで、Animojisの認証と作成のための3Dフェイスマップを生成します。
控えめですが、意味のある
SpeeChinの主な目的は、音声障害のある人が発声のタスクを模倣できるようにすることです。 音声コマンド、およびデバイスは実際に動きを追跡して、音声なしで言われたことを理解します 入力。 「このデバイスは、無音のスピーチでも、人のスピーチパターンを学習する可能性があります。」
SpeeChinには、3Dプリントされたネックレスプラットフォームに接着されたIRカメラが付属しており、安定性を高めるためにベースにコインが取り付けられています。 SpeeChinのデザインのもう1つの有望な側面は、プライバシーです。 SnapのSpectaclesや Facebookのレイバンストーリーグラス カメラビューにすべて（およびすべての人）を記録するSpeeChinの吊り下げ方向は、スマートネックレスを着用している人の表情を記録する場合にのみ適しています。 テストでは、SpeeChinは英語と北京語のコマンドを90.5％と91.6％の精度で認識しましたが、被験者が歩いているときに精度は低下しました。 張氏がアイデアを商品化するパートナーを見つけたのか、それともプロジェクトがオープンソースになるのかについては何も語られていないが、 カメラベースのデバイスは独創的であり、幅広いリリースの恩恵を受けるでしょう。
ソース： コーネル
看護師は、AppleWatchが診断の数ヶ月前に健康上の問題について警告したと言います
著者について