Οι προγραμματιστές αναφέρουν ότι το AI έχει μάθει βασικές δεξιότητες όπως το κόψιμο δέντρων, την κατασκευή σανίδων και
Για την εκπαίδευση AI, η ομάδα OpenAI χρησιμοποίησεανοιχτά βίντεο: περίπου 70 χιλιάδες ώρες ηχογραφήσεων του περάσματος του παιχνιδιού. Για να αντεπεξέλθει σε αυτόν τον όγκο, η εταιρεία ανέπτυξε μια νέα στρατηγική: προεκπαίδευση με έναν «ημι-δάσκαλο».
Σχέδιο μάθησης.Το πρώτο στάδιο είναι η αναζήτηση βίντεο για εκπαίδευση, το δεύτερο στάδιο είναι η εκπαίδευση του νευρικού δικτύου IDM με βάση το βίντεο που περιέχει πληροφορίες σχετικά με τις κινήσεις του ποντικιού και τα πλήκτρα, το τρίτο στάδιο είναι η σήμανση βίντεο με χρήση IDM και η εκπαίδευση του νευρωνικού δικτύου του παιχνιδιού. Πηγή: OpenAI
Στο πρώτο βήμα, οι ερευνητές συνέλεξαν δεδομένα απόεθελοντές: κατέγραψαν βιντεοπαιχνίδια, καθώς και πατήματα πλήκτρων και κινήσεις του ποντικιού. Με βάση αυτά τα δεδομένα, οι προγραμματιστές εκπαίδευσαν το μοντέλο αντίστροφης δυναμικής (IDM) για να καθορίσουν ποιες ενέργειες εκτελεί το πρόγραμμα αναπαραγωγής με βάση μόνο δεδομένα βίντεο. Μετά από αυτό, η IDM "είδε" και σημάδεψε ανεξάρτητα τις εγγραφές του παιχνιδιού που δημοσιεύτηκαν στο YouTube. Η εκπαίδευση AI στο παιχνίδι πραγματοποιείται χρησιμοποιώντας ήδη επισημασμένα δεδομένα IDM.
Οι προγραμματιστές σημειώνουν ότι το μοντέλο συμπεριφοράςΈνας κλωνοποιός ("παίκτης") που έχει εκπαιδευτεί σε ένα διαδικτυακό βίντεο με ετικέτα IDM εκτελεί εργασίες στο Minecraft που είναι σχεδόν αδύνατο να ολοκληρωθούν με την παραδοσιακή εκμάθηση ενίσχυσης από την αρχή. Μαθαίνει να κόβει δέντρα για να μαζεύει κορμούς, να μετατρέπει αυτούς τους κορμούς σε σανίδες και μετά να φτιάχνει ένα τραπέζι χειροτεχνίας από τις σανίδες. Αυτή η ακολουθία διαρκεί περίπου 50 δευτερόλεπτα ή χίλιες διαδοχικές ενέργειες παιχνιδιού για ένα άτομο που είναι ιδιοκτήτης του Minecraft.
Οι προγραμματιστές έδειξαν επίσης ότι η πρόσθετη λεπτομέρεια μέσω της παρατήρησης της τεχνητής νοημοσύνης της πραγματικής διαδικασίας του παιχνιδιού βοηθά στη γρήγορη εκπαίδευση του μοντέλου σε πιο σύνθετες δεξιότητες.
Οι ερευνητές σημειώνουν ότι το Minecraft είναιμόνο ένα παράδειγμα πιθανής εφαρμογής της νέας τεχνολογίας. Γενικά, η προεκπαίδευση επιτρέπει στο AI να χρησιμοποιεί ελάχιστους πόρους για να αποκτήσει διάφορες δεξιότητες με βάση μεγάλο όγκο δεδομένων βίντεο.
Διαβάστε περισσότερα:
Το διαστημικό σκάφος πέταξε 200 χιλιόμετρα από τον Ερμή. Δείτε τι είδε
Το κινεζικό κράνος ανάγνωσης μυαλού κρούει τον κώδωνα του κινδύνου όταν ένα άτομο βλέπει περιεχόμενο πορνό
Ο δορυφόρος του Δία εξετάστηκε με ένα νέο πρίσμα: τι είδαν εκεί οι επιστήμονες