Výskumná skupina na Facebooku vytvorila AI s názvom Vid2Play, vďaka ktorej môžu herné postavy vyzerať
Ako to urobili
Tím použil dve neurónové siete:Pose2Pose a Pose2Frame. Najprv sa video vloží do programu Pose2Pose, ktorý je určený na identifikáciu rôznych typov akcií, ako je tanec, hranie tenisu alebo šerm. Systém potom oddelí postavu osoby spolu s jej tieňom a predmetmi v rukách od pozadia a vloží ich na čierne pozadie. Potom môžete ovládať pohyb objektu pomocou joysticku alebo klávesnice.
Stačilo len natrénovať systémniekoľko krátkych videí. Umelá inteligencia dokázala odstrániť iných ľudí a kompenzovať rôzne uhly kamery. Štúdia pripomína funkciu v aplikácii Adobe After Effects na odstránenie nepotrebných prvkov z videa, ako sú turisti alebo odpadkové koše.
Animácia zatiaľ nie je dokonalá - postava vyzerá ako posuvná a rozsah pohybu je trochu obmedzený. Je to však veľký pokrok v porovnaní s predchádzajúcimi pokusmi o extrahovanie postavy z videa.
Táto inovácia umožní vývojárom hier vytvárať si vlastné postavy na základe osobných videí alebo pridať svoju obľúbenú osobnosť z YouTube. Pohyby budú realistickejšie ako pri manuálnom vytváraní animácie.