AIは、音声を記号言語でビデオに変換することを学びました

人工知能 (AI) に基づいたモデルがフォトリアルなビデオを作成することを学習しました

手話通訳者。これらのアバターは音声をリアルタイムで言語に翻訳し、ユーザーの数十のソースへのアクセスを向上させることができます。

サリー大学のベンサンダース(UK)と同僚は、話し言葉をサイン言語に変換するニューラルネットワークを使用しました。 SignGANシステムは、これらの兆候を人間の骨格の3Dモデルと相関させます。チームは、実際のサイン言語翻訳者のビデオでAIをトレーニングし、画像に基づいてフォトリアリスティックなビデオを作成することを教えました。

IKEA スマート デバイスとシナリオの組み合わせ

以前、Googleは次のことができるモデルを考案しましたビデオ通話中に署名言語を読みます。 AIは「積極的に話す」ことを識別できますが、対話者が手や頭を動かすだけの場合は無視します。

研究者は検出システムを発表しましたリアルタイムのサイン言語。彼女は、対話者が何かを言おうとしたとき、または単に彼の体、頭、腕を動かしたときを区別することができます。科学者たちは、この作業は人にとって簡単に思えるかもしれませんが、以前はどのビデオコールサービスにもそのようなシステムはありませんでした-それらはすべて人の音やジェスチャーに反応します。

また読む

衛星画像は、地球の気候が不均一に変化していることを確認しています

失踪したヒッティテスの疑惑の王国を見つけた。考古学者は何を見つけましたか?

量子ナノダイヤモンドは、医療検査の精度を向上させることができます