Facebook vytvořil umělou inteligenci, která mění skutečné lidi na zvládnutelné herní postavy.

Výzkumná skupina na Facebooku vytvořila AI s názvem Vid2Play, která může herní postavy zapnout

videa se skutečnými lidmi.

Jak to udělali

Tým používal dvě neuronové sítě: Pose2Pose a Pose2Frame. Za prvé, video je podáváno v Pose2Pose, určené k identifikaci různých typů činností, jako je tanec, tenis nebo oplocení. Systém pak odděluje postavu osoby spolu s jeho stínem a objekty ve svých rukou od pozadí a vkládá je na černé pozadí. Poté můžete ovládat pohyb objektu joystickem nebo klávesnicí.

Trvalo to celkem školení pro systém.několik krátkých videí. Umělá inteligence dokázala odstranit jiné lidi a kompenzovat různé úhly kamery. Studie se podobá funkci v Adobe After Effects, aby odstranila nepotřebné prvky z videí, jako jsou turisté nebo popelnice.

Animace zatím není dokonalá - postava vypadá jako posuvná a rozsah pohybu je trochu omezený. To je však ve srovnání s předchozími pokusy o extrahování postavy z videa velký pokrok.

Tato inovace umožní vývojářům her vytvořit své hrdiny na základě osobních videí nebo přidat svou oblíbenou osobnost z YouTube. Pohyby budou realističtější než při ručním vytváření animace.