A Facebook AI és 13 másik egyetem fejlesztői létrehozták a legszélesebb körű adathalmazt a rögzített videókból
74 önkéntesből 855 vett részt az adatgyűjtésbenvárosok és 9 ország. Kamerával és okosszemüveggel videóztak. A forgatás során a résztvevők napi tevékenységeiket végezték: ételt készítettek, élelmiszert választottak a boltban, kommunikáltak másokkal. A rekordok teljes hossza 3025 óra volt.
Minden egyes videóhoz van leírás, hogy mitmi történik benne. A videó egy részében további részletes adatok találhatók a hangról, a szoba háromdimenziós modellje, a látóirány, valamint hordható sztereó kamerával egy személyről készített sztereoszkópikus képkockák és szinkronizált videók. különböző emberek egy helyen és ugyanabban az időben, például társasjátékidőben.
Az összegyűjtött adatok felhasználásával speciális készségeket is elsajátíthat, ehhez speciális tematikus modulokat hoztak létre:
- Epizodikus memória edzésére, amikor az algoritmusnak meg kell válaszolnia a megtörtént eseményekre vonatkozó kérdést, például, hogy tegnap mikor voltam orvosnál.
- A jövőbeli cselekvések előrejelzése, például egy edény megsózása vagy a dolgok mosógépből való eltávolítása.
- Annak megértése, hogy egy személy mit csinál, és hogyan mozognak a tárgyak a keretben.
- A beszélgetés nyomon követése és annak megértése, hogy ki mit mondott a beszélgetésben.
- Az emberek közötti interakció elemzése, különösen annak megértése, hogy a kamerahordozót nézik vagy megszólítják.
A szerzők 2021. november végéig tervezik közzétenni az adatkészletet; azután lesz elérhető, miután a felhasználó aláírta a licencszerződést.
Olvass tovább
Hawkingnak igaza volt, de néha tévedett: a tudós legmerészebb elképzelései
A csillagászok rájöttek, hogy a Föld és a Naprendszer egy óriási mágneses alagútban vannak
Fagyott mamut és ember az "aszfalton": hogyan állítja meg a természet az időt