Щоб вважати руху людини, тепер потрібна не кімната камер, а всього одна

Звичайні системи захоплення руху у спеціально обладнаних студіях зазвичай покладаються на кілька

синхронізованих камер, прикріплених достелі та стін, які фіксують рухи людини, одягненої в захисний костюм, з численними датчиками. Такі системи часто дуже дорогі та обмежені з погляду простору та середовища, в яких може переміщатися власник.

Група дослідників на чолі з Хідекі Койке зTokyo Tech представляє нову систему захоплення руху, яка складається з однієї надширокої камери «риб'яче око», встановленої на грудях користувача. Їх конструкція не тільки дозволяє подолати брак місця в існуючих системах, але і є рентабельною.

Система, що отримала назву MonoEye, може захоплювати рухи тіла користувача, а також його перспективу або вікно перегляду. 

Наш надширокий об'єктив «риб'яче око» має поле огляду 280 градусів і може захоплювати кінцівки, обличчя та довкілля користувача. 

текст дослідження

Щоб забезпечити надійний Мультимодальний захопленняруху, система була розроблена з трьома глибокими нейронними мережами, здатними оцінювати тривимірну позу тіла, позу голови і позу камери в режимі реального часу.

Дослідники вже навчили ці нейронні мережі здопомогою великого набору даних, що складається з 680 000 зображень людей з різними формами тіла, одягу, дій, фону і умов освітлення, а також 16 000 кадрів фотореалістичних зображень.

Дослідники припускають, що в майбутньому камеру на грудях можна буде перетворити в повсякденний аксесуар, такий як затиск для краватки, брошка або спортивне спорядження.

Читати також

Річна місія в Арктиці закінчилася, і дані невтішні. Що чекає людство?

На 3 день хвороби більшість хворих COVID-19 втрачають нюх і часто страждають нежиттю

Вчені з'ясували, чому діти є найнебезпечнішими переносниками COVID-19