En forskergruppe på Facebook har laget en AI kalt Vid2Play som kan få spillkarakterer til å se ut
Hvordan gjorde de det
Teamet brukte to nevrale nettverk:Pose2Pose og Pose2Frame. Først mates videoen inn i Pose2Pose, som er designet for å identifisere forskjellige typer handlinger som dans, tennis eller fekting. Systemet skiller deretter personens figur, sammen med hans skygge og objekter i hendene, fra bakgrunnen og setter dem inn på en svart bakgrunn. Etter dette kan du kontrollere bevegelsen til objektet ved hjelp av en joystick eller et tastatur.
Det tok bare å trene systemetflere korte videoer. Den kunstige intelligensen var i stand til å fjerne andre mennesker og kompensere for forskjellige kameravinkler. Studien minner om funksjonen i Adobe After Effects for å fjerne unødvendige elementer fra en video, for eksempel turister eller søppeldunker.
Hittil er animasjonen ikke perfekt - figuren ser ut som en glidende og bevegelsesområdet er litt begrenset. Dette er imidlertid en stor fremgang i forhold til tidligere forsøk på å trekke ut et tegn fra videoen.
Denne innovasjonen vil tillate spillutviklere å lage sine egne karakterer basert på personlige videoer eller legge til favorittpersonligheten deres fra YouTube. Bevegelsene vil være mer realistiske enn når du lager animasjonen manuelt.