אפל פיתחה רשת עצבית בשם NeuMan, שלומדת מסרטונים קצרים ויכולהיצר
כדי לאמן רשת עצבית, מספיק וידאו של 10 שניות שצולם על ידי מצלמה נעה.התוכנית מחלצת תמונה של אדם והסביבה מהסרטון.
לאחר מכן, NeuMan יכול לסנתז קליפים, עלשאותה דמות תבצע פעולות שונות. למשל, ריקוד, סלטה או קפיצה. לסרטון החדש יש פחות חדות, אבל באופן כללי הם נראים כמו קטעים אמיתיים באיכות ירודה.
סרטון הדגמה: איש רוקד. וידאו: אפל
המטרה העיקרית של התוכנית, כפי שצויןמפתחים הם יישומים למציאות רבודה. הם גם מציינים ששני מודלים של NeRF (קרינה עצבית) משמשים לאימון הרשת העצבית: הראשון מהם חוקר אדם, והשני חוקר את הרקע. בעזרת המודלים הללו, הרשת העצבית לומדת את הגיאומטריה הגסה של אדם וסצנה. ואז יכול ליצור אותו מחדש בצורות חדשות.
סרטון הדגמה: טעינה. וידאו: אפל
יחד עם זאת, כפי שמציינים החוקרים, היציבה שאדם נוקט במהלך הצילום אינה משפיעה על איכות הסרטון המוגמר.
קרא עוד:
שיא פליטת המסה העטרה ב-Betelgeuse גדולה פי 400 מיליארד מהשמש
מגלודון אכל חיה בגודל של לוויתן קטלן בכל פעם
האוורסט מצא עקבות של DNA שלא אמורים להיות שם