קבוצת מחקר בפייסבוק יצרה AI בשם Vid2Play שיכול לגרום לדמויות משחק להיראות כמו
איך הם עשו את זה
הצוות השתמש בשתי רשתות עצביות:Pose2Pose ו-Poe2Frame. ראשית, הסרטון מוכנס ל-Pose2Pose, שנועד לזהות סוגים שונים של פעולות כמו ריקוד, משחק טניס או סיוף. לאחר מכן המערכת מפרידה את דמותו של האדם, יחד עם הצל והאובייקטים שבידיו, מהרקע ומכניסה אותם על רקע שחור. לאחר מכן, תוכל לשלוט בתנועת האובייקט באמצעות ג'ויסטיק או מקלדת.
כדי לאמן את המערכת נדרש רקמספר סרטונים קצרים. הבינה המלאכותית הצליחה להסיר אנשים אחרים ולפצות על זוויות מצלמה שונות. המחקר מזכיר את הפונקציה ב-Adobe After Effects להסרת אלמנטים מיותרים מסרטון, כמו תיירים או פחי אשפה.
עד כה, את האנימציה היא לא מושלמת - הדמות נראית כמו אחד הזזה ואת טווח התנועה הוא קצת מוגבל. עם זאת, זוהי התקדמות גדולה לעומת ניסיונות קודמים לחלץ דמות מהסרטון.
חידוש זה יאפשר למפתחי משחקים ליצור דמויות משלהם על סמך סרטונים אישיים או להוסיף את האישיות האהובה עליהם מיוטיוב. התנועות יהיו מציאותיות יותר מאשר בעת יצירת האנימציה באופן ידני.