Facebook AI 및 기타 13개 대학의 개발자는 촬영된 동영상의 가장 광범위한 데이터 세트를 만들었습니다.
74명의 자원 봉사자 중 855명이 데이터 수집에 참여했습니다.도시와 9개국. 그들은 카메라와 스마트 안경으로 동영상을 촬영했습니다. 촬영 기간 동안 참가자들은 음식 준비, 가게에서 식료품 고르기, 다른 사람들과 소통하는 등의 일상 활동을 했습니다. 기록의 총 길이는 3,025시간이었습니다.
각 개별 동영상마다 설명이 있습니다.그 안에서 무슨 일이 일어나고 있는지. 또한 비디오의 일부에는 소리, 방의 3차원 모델, 시야 방향, 한 사람이 웨어러블 스테레오 카메라로 촬영한 입체 프레임 및 동기화된 비디오 세트에 대한 기타 자세한 데이터가 있습니다. 예를 들어 보드 게임 시간과 같이 한 장소에서 동시에 여러 사람들이 함께 합니다.
또한 수집된 데이터를 사용하여 특정 기술을 배울 수 있습니다. 이 특별한 주제 모듈이 생성되었기 때문입니다.
- 에피소드 기억을 훈련하려면 알고리즘이 발생한 사건에 대한 질문에 답해야 할 때(예: 어제 몇 시에 의사와 약속을 잡았는지).
- 예를 들어 접시에 소금을 뿌리는 것을 기억하거나 세탁기에서 물건을 꺼내는 것과 같은 미래 행동을 예측합니다.
- 사람이 무엇을 하고 있고 물체가 프레임에서 어떻게 움직이는지 이해합니다.
- 대화를 추적하고 대화에서 누가 무엇을 말했는지 이해합니다.
- 사람들 사이의 상호 작용에 대한 분석, 특히 카메라 캐리어가 살펴보거나 다루어지고 있음을 이해합니다.
작성자는 2021년 11월 말까지 데이터 세트를 게시할 계획이며 사용자가 라이센스 계약에 서명한 후에 사용할 수 있습니다.
더 읽어보기
호킹은 옳았지만 때로는 틀렸다: 과학자의 가장 대담한 아이디어
천문학자들은 지구와 태양계가 거대한 자기 터널 안에 있다는 것을 알아냈습니다.
얼어붙은 매머드와 "아스팔트"의 남자: 자연이 시간을 멈추는 방법