Προγραμματιστές από το Facebook AI και 13 άλλα πανεπιστήμια δημιούργησαν το πιο εκτεταμένο σύνολο δεδομένων βίντεο που τραβήχτηκαν
Στη συλλογή δεδομένων συμμετείχαν 855 από τους 74 εθελοντέςπόλεις και 9 χώρες. Γύρισαν βίντεο με κάμερα και έξυπνα γυαλιά. Κατά τη διάρκεια των γυρισμάτων, οι συμμετέχοντες έκαναν τις καθημερινές τους δραστηριότητες: προετοιμασία φαγητού, επιλογή ειδών παντοπωλείου στο κατάστημα, επικοινωνία με άλλους ανθρώπους. Η συνολική διάρκεια των αρχείων ήταν 3.025 ώρες.
Για κάθε μεμονωμένο βίντεο υπάρχει μια περιγραφή του τιτι συμβαίνει σε αυτό. Επίσης για μέρος του βίντεο υπάρχουν άλλα λεπτομερή δεδομένα σχετικά με τον ήχο, ένα τρισδιάστατο μοντέλο του δωματίου, την κατεύθυνση θέασης, καθώς και στερεοσκοπικά καρέ που λαμβάνονται με φορητή στερεοφωνική κάμερα από ένα άτομο και ένα σύνολο συγχρονισμένων βίντεο από διαφορετικά άτομα σε ένα μέρος και ταυτόχρονα, για παράδειγμα, ώρα επιτραπέζιου παιχνιδιού.
Επίσης, χρησιμοποιώντας τα δεδομένα που συλλέγονται, μπορείτε να μάθετε συγκεκριμένες δεξιότητες, για αυτό έχουν δημιουργηθεί ειδικές θεματικές ενότητες:
- Για να εκπαιδεύσω την επεισοδιακή μνήμη, όταν ο αλγόριθμος πρέπει να απαντήσει στην ερώτηση σχετικά με τα γεγονότα που έχουν συμβεί, για παράδειγμα, τι ώρα είχα ραντεβού με γιατρό χθες.
- Πρόβλεψη μελλοντικών ενεργειών, για παράδειγμα, να θυμάστε να αλατίσετε ένα πιάτο ή να αφαιρέσετε πράγματα από το πλυντήριο.
- Κατανόηση του τι κάνει ένα άτομο και πώς κινούνται τα αντικείμενα στο πλαίσιο.
- Παρακολούθηση της συνομιλίας και κατανόηση ποιος είπε τι στη συνομιλία.
- Μια ανάλυση της αλληλεπίδρασης μεταξύ των ανθρώπων, ιδιαίτερα της κατανόησης ότι ο φορέας της κάμερας εξετάζεται ή αντιμετωπίζεται.
Οι συγγραφείς σχεδιάζουν να δημοσιεύσουν το σύνολο δεδομένων έως τα τέλη Νοεμβρίου 2021. Θα είναι διαθέσιμο αφού ο χρήστης υπογράψει τη συμφωνία άδειας χρήσης.
Διαβάστε περισσότερα
Ο Χόκινγκ είχε δίκιο, αλλά μερικές φορές λάθος: οι πιο τολμηρές ιδέες του επιστήμονα
Οι αστρονόμοι έχουν καταλάβει ότι η Γη και το ηλιακό σύστημα βρίσκονται σε μια γιγαντιαία μαγνητική σήραγγα
Παγωμένο μαμούθ και ένας άνθρωπος στην «άσφαλτο»: πώς η φύση σταματά τον χρόνο