からの科学者によって開発された新しいウェアラブルデバイス コーネル大学 ソナーを使用して人物の表情をキャプチャし、デジタルアバターとして再現することができます。 カメラを避けることで、プライバシーの懸念を軽減できます。
デバイスの名前であるEarIOは非常にシンプルです。 両側にマイクとスピーカーを備えたヘッドセットで構成されており、通常のヘッドセットに接続できます。 スピーカーは人間の可聴範囲外の音のインパルスを再生し、ソナーが機能するように、そのエコーはマイクによって拾われます。
エコープロファイルは顔の表情に応じて変化します。このため、適切にトレーニングされたアルゴリズムは、ソナーが受け取った変化を認識し、それらを画像に変換します。
EarlO、音から物事を「見る」ソナー
「人工知能の力のおかげで、私たちのアルゴリズムは、人間が知覚できない筋肉の動きと顔の表情の間に複雑な関係を構築します」と彼は言います。 ケリー、研究の共著者のXNUMX人。 「非常に複雑な情報、つまり顔の正面全体の情報を抽出するために使用できます」。 研究はジャーナルに掲載されました インタラクティブ、モバイル、ウェアラブル、ユビキタステクノロジーに関するAssociation forComputingMachineryの議事録。 そして、私はそれをここであなたにリンクします。
チームは16人の参加者でEarIOソナーをテストし、通常のスマートフォンでアルゴリズムを実行しました。 そして、デバイスは通常のカメラ/カメラができるように顔の表情を再構築することができました。 風、会話、街路のノイズなどのバックグラウンドノイズは、顔を記録する機能に少しも干渉しませんでした。
007からのテクノロジー
研究者は、ソナーにはソナーを使用するよりもいくつかの利点があると指摘しています カメラ。 音響データは、はるかに少ないエネルギーと処理能力を消費するため、より小型で軽量のデバイスを使用できます。 カメラは、ユーザーが共有したくない可能性のある多くの追加の個人情報を収集することもできるため、ソナーの方が安全な場合があります。
もちろん、想像力を働かせて飛んでいると、そのような技術が通常のヘッドセットに静かに「滑り込む」ことを想像し、監視目的でも、遠くから唇の動きや表情を伝えることができると思います。 ただし、今回はもっと実用的な使い方があります。
どれの? まず第一に、ビデオゲームセクターのもの:ゲーム、バーチャルリアリティ、またはメタバースのデジタルアバターに物理的な顔の表情を複製する実用的な方法。 現在、チームは、ユーザーが頭を向けたときなど、他の干渉を排除し、AIアルゴリズムのトレーニングシステムを簡素化するために取り組んでいます。
わかります。 つまり、聞くことです。 要するに、あなたは理解しています。