Výzkumná skupina na Facebooku vytvořila AI nazvanou Vid2Play, díky které mohou herní postavy vypadat
Jak to udělali
Tým použil dvě neuronové sítě:Pose2Pose a Pose2Frame. Nejprve je video vloženo do Pose2Pose, který je navržen tak, aby identifikoval různé typy akcí, jako je tanec, hraní tenisu nebo šerm. Systém poté oddělí postavu osoby spolu s jejím stínem a předměty v rukou od pozadí a vloží je na černé pozadí. Poté můžete ovládat pohyb objektu pomocí joysticku nebo klávesnice.
Stačilo pouze natrénovat systémněkolik krátkých videí. Umělá inteligence dokázala odstranit jiné lidi a kompenzovat různé úhly kamery. Studie připomíná funkci v Adobe After Effects k odstranění nepotřebných prvků z videa, jako jsou turisté nebo odpadkové koše.
Animace zatím není dokonalá - postava vypadá jako posuvná a rozsah pohybu je trochu omezený. To je však ve srovnání s předchozími pokusy o extrahování postavy z videa velký pokrok.
Tato inovace umožní vývojářům her vytvořit si vlastní postavy na základě osobních videí nebo přidat svou oblíbenou osobnost z YouTube. Pohyby budou realističtější než při ručním vytváření animace.