Egy Facebook-kutatócsoport létrehozott egy Vid2Play nevű mesterséges intelligenciát, amely képes a játékkarakterek megjelenésére
Hogyan csinálták
A csapat két neurális hálózatot használt:Pose2Pose és Pose2Frame. Először is, a videó a Pose2Pose-ba kerül, amely a különböző típusú tevékenységek azonosítására szolgál, mint például a tánc, a teniszezés vagy a vívás. A rendszer ezután elválasztja a személy alakját az árnyékával és a kezében lévő tárgyakkal együtt a háttértől, és beilleszti őket egy fekete háttérre. Ezt követően egy joystick vagy billentyűzet segítségével vezérelheti az objektum mozgását.
Csak a rendszer betanítására volt szükségnéhány rövid videó. A mesterséges intelligencia képes volt eltávolítani más embereket, és kompenzálni a különböző kameraállásokat. A tanulmány az Adobe After Effects azon funkciójára emlékeztet, amely eltávolítja a videóból a felesleges elemeket, például a turistákat vagy a kukákat.
Eddig az animáció nem tökéletes - az ábra úgy néz ki, mint egy csúszó, és a mozgási tartomány egy kicsit korlátozott. Ez azonban nagy előrelépés, mint a korábbi kísérletek, hogy egy karaktert kivágjanak a videóból.
Ez az innováció lehetővé teszi a játékfejlesztők számára, hogy személyes videók alapján saját karaktereket alkossanak, vagy hozzáadják kedvenc személyiségüket a YouTube-ról. A mozdulatok valósághűbbek lesznek, mint az animáció manuális létrehozásakor.