不気味で技術的に進んだ:NVIDIAは、誰かの声の下で現実的に口を開くように3Dモデルを教えました

NVIDIA はグラフィック カード メーカーとして最もよく知られていますが、興味深い製品も作っています。

ソフトウェアツール。この例としては、録音された音声に基づいて 3D モデルをアニメーション化できる Audio2Face システムがあります。

Audio2Face は自動プロセスを実装しますインストールこのツールは、オープンなリアルタイム物理ベース シミュレーション プラットフォーム NVIDIA Omniverse 上で実行されます。プログラムはオーディオ ファイルを取得し、モデル上で驚くほどよく一致するアニメーションを作成します。ほとんどの言語でうまく動作します。

ツールのために、NVIDIAはディープニューラルを作成しました顔のアニメーションをリアルタイムで音声にマッピングするネットワーク。同社には、Audio2Faceの説明が掲載されたWebサイトがあります。プログラムのオープンベータ版をダウンロードすることもできます。それまでの間、テクノロジーがどのように機能するかの例を見ることができます。結果は恐ろしいことさえありえます。

ソース:PCゲーマー