Nvidiaは、一部の写真をリアルな3Dシーンに自動的に変換できる驚くべき新しい人工知能アルゴリズムを実証しました。
深層学習ニューラルネットワークに基づくアルゴリズムは、わずか3ショットから12Dシーンを作成し、数秒でレンダリングすることができました。 結果はまだ完璧にはほど遠いですが、驚くべきものです。そして、ビデオ編集や顔、人物、風景のレンダリングなどの分野での将来のアプリケーションの可能性を示しています。
Nvidiaは、動作中のアルゴリズムを示すビデオをリリースしました。自分でチェックしてください。
インスタントNERF、Nvidiaの3D「魔法」
Nvidiaによって開発されたツールは、2020年に発売されたGoogleResearchとカリフォルニア大学サンディエゴ校の技術である「ニューラルラディアンスフィールド」から派生したInstantNERFとして知られています。
あなたが本当にもっと知りたいのなら こちらをご覧ください (英語のテキスト)。 一方、私が理解していることに満足している場合、本質的に、この手法は、いくつかの2D画像からの色と光の強度データを結合して3Dシーンを生成します。 実際、システムには写真に加えて、カメラの位置に関する情報が必要です。
研究者は、このタイプのモデルを2Dから3Dに改善し、時間枠を短縮しながらレンダリングをより複雑にすることに取り組んできました。 実際、Nvidiaは、Instant NeRFを使用した新しいレンダリング方法は、おそらくこれまでに作成された中で最速であると主張しています。手順は、数分で完了し、実質的に瞬時に完了します。
可能な応用分野
この手法がより速く、より簡単に実装できるようになると、あらゆるタイプのビジネスに使用できるようになると、Nvidiaはブログ投稿で述べています。 仕事を説明する.
インスタントNeRFを使用すると、仮想世界のアバターや環境を生成したり、ビデオ会議の参加者とその周辺を3Dでキャプチャしたり、3Dデジタルマップの設定を再作成したりできます。 イシャサリアン Nvidiaによる。
この技術を使用して、ロボットや自動運転車に、2D写真や動画を撮影して実世界の物体のサイズや形状を特定する方法を教えることができます。 また、建築や娯楽にも非常に役立ちます。 彼はスタートアップを支援します(イタリア語も 来るクエスト)作成者がすぐに変更および開発できる実際の環境のより高速なデジタル表現を作成します。