En Facebook-forskningsgruppe har lavet en AI kaldet Vid2Play, der kan få spilfigurer til at ligne
Hvordan gjorde de det
Holdet brugte to neurale netværk:Pose2Pose og Pose2Frame. Først føres videoen ind i Pose2Pose, som er designet til at identificere forskellige typer handlinger som at danse, spille tennis eller fægte. Systemet adskiller derefter personens figur, sammen med hans skygge og objekter i hans hænder, fra baggrunden og indsætter dem på en sort baggrund. Herefter kan du styre objektets bevægelse ved hjælp af et joystick eller tastatur.
Det tog kun at træne systemetflere korte videoer. Den kunstige intelligens var i stand til at fjerne andre mennesker og kompensere for forskellige kameravinkler. Undersøgelsen minder om funktionen i Adobe After Effects til at fjerne unødvendige elementer fra en video, såsom turister eller skraldespande.
Hidtil er animationen ikke perfekt - figuren ligner en glidende og bevægelsesområdet er lidt begrænset. Dette er dog en stor fremgang i forhold til tidligere forsøg på at udtrække et tegn fra videoen.
Denne innovation vil give spiludviklere mulighed for at skabe deres egne karakterer baseret på personlige videoer eller tilføje deres yndlingspersonlighed fra YouTube. Bevægelserne vil være mere realistiske, end når du opretter animationen manuelt.