Слух поліпшив сприйняття навколишнього світу роботом

Дослідники Університету Карнегі-Меллона (CMU) виявили, що сприйняття робота може помітно покращити,

якщо додати слух.

У першому великомасштабному дослідженнівзаємодії звуку і дій робота, проведеному в Інституті робототехніки CMU, дослідники виявили, що звуки можуть допомогти роботу відрізнити навіть такі схожі об'єкти, як металева викрутка і металевий ключ. Слух також може допомогти роботам визначити, які дії повинен викликати звук, і використовувати їх для прогнозування фізичних властивостей нових об'єктів. Дослідники відзначили, що швидкість роботи зросла в два рази, а пристрої почали класифікувати об'єкти тільки на слух в 76% випадків.

ІІ може визначати жести завдяки зору та сенсорам на руках

Для проведення своїх досліджень вчені створиливеликий набір даних, записуючи відео і аудіо 60 поширених предметів - іграшок, ручних інструментів, взуття, яблук, тенісних м'ячиків. До кожного з цих предметів записали цілий набір звуків - як вони ковзали, скочувалися або врізалися один в одного. Після цього робот проаналізував цей набір даних і навчився поводитися з ним.

Це найбільший набір звукових даних, наяких тренувалися роботи. Дослідники були здивовані, наскільки зросла ефективність роботи пристроїв. Вони виявили, наприклад, що робот може використовувати те, що він дізнався про звук одного набору об'єктів, щоб зробити прогнози про фізичні властивості інших предметів, яких він ніколи не бачив і не чіпав.

Читайте також

- Створений спосіб викорінити паразитів, перекривши всі шляхи їх метаболізму

— Після введення російської вакцини у добровольців знайшли 144 побічні ефекти

— Опубліковано перші випробування швидкості інтернету Starlink