Изследователска група във Facebook създаде AI, наречен Vid2Play, който може да направи така, че да изглеждат героите в играта
Как го направиха
Екипът използва две невронни мрежи:Pose2Pose и Pose2Frame. Първо, видеото се подава в Pose2Pose, който е предназначен да идентифицира различни типове действия като танци, игра на тенис или фехтовка. След това системата отделя фигурата на човека, заедно със сянката му и предметите в ръцете му, от фона и ги вмъква върху черен фон. След това можете да контролирате движението на обекта с помощта на джойстик или клавиатура.
Трябваше само да обучите систематаняколко кратки видеоклипа. Изкуственият интелект успя да премахне други хора и да компенсира различните ъгли на камерата. Проучването напомня функцията в Adobe After Effects за премахване на ненужни елементи от видео, като туристи или кофи за боклук.
Засега анимацията не е перфектна - фигурата изглежда като плъзгаща се и обхватът на движение е малко ограничен. Това обаче е голям напредък в сравнение с предишните опити за извличане на символ от видеото.
Тази иновация ще позволи на разработчиците на игри да създават свои собствени герои въз основа на лични видеоклипове или да добавят любимата си личност от YouTube. Движенията ще бъдат по-реалистични, отколкото когато създавате анимацията ръчно.