Vývojáři z Facebooku AI a 13 dalších univerzit vytvořili nejrozsáhlejší datovou sadu videí, která byla natočena
Sběru dat se zúčastnilo 855 ze 74 dobrovolníkůměsta a 9 zemí. Natáčeli videa kamerou a chytrými brýlemi. Během natáčení se účastníci věnovali každodenním činnostem: příprava jídla, výběr jídla v obchodě, komunikace s ostatními lidmi. Celková délka záznamů byla 3 025 hodin.
U každého jednotlivého videa je popis čehoco se v něm děje. U části videa jsou i další podrobné údaje o zvuku, trojrozměrný model místnosti, směr pohledu, ale i stereoskopické snímky pořízené nositelnou stereo kamerou od jedné osoby a sada synchronizovaných videí natočených různými lidmi na jednom místě a ve stejnou dobu např. deskoherní čas.
Pomocí nasbíraných dat se také můžete naučit specifické dovednosti; za tímto účelem byly vytvořeny speciální tematické moduly:
- Pro výuku epizodické paměti, kdy algoritmus musí odpovědět na otázku o událostech, které nastaly, například v kolik hodin jsem byl včera u lékaře.
- Předvídání budoucích akcí, například nezapomenutí na sůl na nádobí nebo vyjmutí věcí z pračky.
- Pochopení toho, co člověk dělá a jak se předměty pohybují v záběru.
- Sledování konverzace a pochopení toho, kdo co v konverzaci řekl.
- Analýza interakce mezi lidmi, zejména pochopení toho, že se na nosič kamery dívá nebo je oslovován.
Autoři plánují zveřejnit datovou sadu do konce listopadu 2021, bude k dispozici poté, co uživatel podepíše licenční smlouvu.
Přečtěte si více
Hawking měl pravdu, ale někdy se mýlil: nejodvážnější nápady vědce
Astronomové zjistili, že Země a sluneční soustava jsou v obřím magnetickém tunelu
Zmrazený mamut a muž na „asfaltu“: jak příroda zastavuje čas