Strašidelné a technologicky pokročilé: NVIDIA naučila 3D modely realisticky otevřít ústa pod něčím hlasem

NVIDIA je známá především jako výrobce grafických karet, ale také dělá některé zajímavé

softwarových nástrojů. Příkladem toho je systém Audio2Face, který umožňuje animovat 3D modely na základě nahraného hlasu

Audio2Face implementuje automatický procesinstalace Nástroj běží na otevřené fyzikálně založené simulační platformě NVIDIA Omniverse v reálném čase. Program vezme zvukový soubor a vytvoří na modelu překvapivě dobře sladěnou animaci. Funguje dobře s většinou jazyků.

Pro tento nástroj NVIDIA vytvořila hluboký neurálnísíť, která mapuje animaci obličeje na zvuk v reálném čase. Společnost má webové stránky s pokyny pro Audio2Face. Můžete si také stáhnout otevřenou beta verzi programu. Mezitím se můžete podívat na příklady fungování technologie. Výsledek může být dokonce děsivý.

Zdroj: PC Gamer