Μια ερευνητική ομάδα στο Facebook δημιούργησε ένα AI που ονομάζεται Vid2Play που μπορεί να κάνει τους χαρακτήρες του παιχνιδιού να μοιάζουν
Πώς το έκαναν
Η ομάδα χρησιμοποίησε δύο νευρωνικά δίκτυα:Pose2Pose και Pose2Frame. Αρχικά, το βίντεο τροφοδοτείται στο Pose2Pose, το οποίο έχει σχεδιαστεί για να αναγνωρίζει διαφορετικούς τύπους ενεργειών όπως χορό, παιχνίδι τένις ή ξιφασκία. Στη συνέχεια, το σύστημα διαχωρίζει τη φιγούρα του ατόμου, μαζί με τη σκιά και τα αντικείμενα στα χέρια του, από το φόντο και τα εισάγει σε μαύρο φόντο. Μετά από αυτό, μπορείτε να ελέγξετε την κίνηση του αντικειμένου χρησιμοποιώντας ένα joystick ή ένα πληκτρολόγιο.
Για την εκπαίδευση του συστήματος χρειάστηκε μόνοπολλά σύντομα βίντεο. Η τεχνητή νοημοσύνη κατάφερε να αφαιρέσει άλλα άτομα και να αντισταθμίσει τις διαφορετικές γωνίες της κάμερας. Η μελέτη θυμίζει τη λειτουργία του Adobe After Effects για την αφαίρεση περιττών στοιχείων από ένα βίντεο, όπως τουρίστες ή κάδους απορριμμάτων.
Μέχρι στιγμής, το κινούμενο σχέδιο δεν είναι τέλειο - ο αριθμός φαίνεται να γλιστράει και το εύρος της κίνησης είναι λίγο περιορισμένο. Ωστόσο, αυτό είναι μια μεγάλη πρόοδος σε σύγκριση με προηγούμενες προσπάθειες εξαγωγής ενός χαρακτήρα από το βίντεο.
Αυτή η καινοτομία θα επιτρέψει στους προγραμματιστές παιχνιδιών να δημιουργήσουν τους δικούς τους χαρακτήρες με βάση προσωπικά βίντεο ή να προσθέσουν την αγαπημένη τους προσωπικότητα από το YouTube. Οι κινήσεις θα είναι πιο ρεαλιστικές από ό,τι όταν δημιουργείτε το κινούμενο σχέδιο με το χέρι.