Разработчици от Facebook AI и 13 други университета създадоха най-обширния набор от заснети видеоклипове
855 от 74 доброволци участваха в събирането на данниградове и 9 държави. Те заснеха видеоклипове с камера и умни очила. По време на снимките участниците се занимаваха с ежедневни дейности: приготвяне на храна, избор на храна в магазина, общуване с други хора. Общата продължителност на записите беше 3025 часа.
За всеки отделен видеоклип има описание на каквокакво се случва в него. Също така за част от видеото има други подробни данни за звука, триизмерен модел на стаята, посоката на гледане, както и стереоскопични кадри, заснети с носима стерео камера от един човек и набор от направени синхронизирани видеоклипове от различни хора на едно място и по едно и също време, например време за настолна игра.
Също така, използвайки събраните данни, можете да научите специфични умения; за това са създадени специални тематични модули:
- За преподаване на епизодична памет, когато алгоритъмът трябва да отговори на въпроса за събитията, които са се случили, например, в колко часа вчера бях на лекар.
- Предсказване на бъдещи действия, например да си спомните да осолите ястие или да извадите неща от пералнята.
- Разбиране какво прави човек и как се движат обектите в кадъра.
- Проследяване на разговора и разбиране кой какво е казал в разговора.
- Анализ на взаимодействието между хората, по -специално разбирането, че носителят на камерата се гледа или се разглежда.
Авторите планират да публикуват набора от данни до края на ноември 2021 г.; той ще бъде достъпен, след като потребителят подпише лицензионното споразумение.
Прочетете още
Хокинг беше прав, но понякога грешен: най -смелите идеи на учения
Астрономите са разбрали, че Земята и Слънчевата система са в гигантски магнитен тунел
Замръзнал мамут и човек в „асфалта“: как природата спира времето