Η Apple έχει αναπτύξει ένα νευρωνικό δίκτυο που ονομάζεται NeuMan που μαθαίνει από σύντομα βίντεο και μπορεί να δημιουργήσει
Για να εκπαιδεύσετε ένα νευρωνικό δίκτυο, αρκεί ένα βίντεο 10 δευτερολέπτων που γυρίστηκε με κινούμενη κάμερα. Το πρόγραμμα εξάγει μια εικόνα ενός ατόμου και του περιβάλλοντος από το βίντεο.
Μετά από αυτό, το NeuMan μπορεί να συνθέσει κλιππου ο ίδιος χαρακτήρας θα εκτελέσει διαφορετικές ενέργειες. Για παράδειγμα, χορός, τούμπες ή άλματα. Το νέο βίντεο έχει λιγότερη ευκρίνεια, αλλά σε γενικές γραμμές μοιάζουν με αληθινά πλάνα κακής ποιότητας.
Επίδειξη βίντεο: dancing man. Βίντεο: Apple
Ο κύριος σκοπός του προγράμματος, όπως αναφέρεταιΟι προγραμματιστές είναι εφαρμογές επαυξημένης πραγματικότητας. Σημειώνουν επίσης ότι δύο μοντέλα NeRF (νευροακτινική ακτινοβολία) χρησιμοποιούνται για την εκπαίδευση του νευρωνικού δικτύου: το πρώτο από αυτά μελετά ένα άτομο και το δεύτερο μελετά το υπόβαθρο. Με τη βοήθεια αυτών των μοντέλων, το νευρωνικό δίκτυο μαθαίνει την πρόχειρη γεωμετρία ενός ατόμου και μιας σκηνής. Και μετά μπορεί να το αναδημιουργήσει σε νέες μορφές.
Επίδειξη βίντεο: φόρτιση. Βίντεο: Apple
Ταυτόχρονα, όπως σημειώνουν οι ερευνητές, η στάση που παίρνει ένα άτομο κατά τη διάρκεια της λήψης δεν επηρεάζει την ποιότητα του τελικού βίντεο.
Διαβάστε περισσότερα:
Η ρεκόρ στεφανιαίας εκτόξευσης μάζας στο Betelgeuse είναι 400 δισεκατομμύρια φορές μεγαλύτερη από τον ήλιο
Ο Megalodon έτρωγε ένα ζώο στο μέγεθος μιας φάλαινας δολοφόνου κάθε φορά
Το Έβερεστ βρήκε ίχνη DNA που δεν έπρεπε να υπάρχουν