Роботів навчили готувати їжу та прибирати на кухні

Дослідники з Дослідницького інституту Idiap у Швейцарії, Китайського університету Гонконгу (CUHK) та

Уханьського університету (WHU) розробили методмашинного навчання, що дозволяє навчити роботів приготування їжі та прибирання на кухні. Їх метод поєднує використання моделі на основі трансформатора і графової нейронної мережі (GNN).

«Наша недавня робота – це спільна роботатри лабораторії. Ми вивчаємо цю техніку вже близько десяти років та зацікавлені у створенні інтелектуальних роботів, які можуть готувати їжу для людей», - зазначають дослідники.

Вони вирішили зосередитися китайськоюкулінарному мистецтві, зокрема на приготуванні їжі у фритюрі — техніці, яка має на увазі обсмажування інгредієнтів на сильному вогні, де їх потрібно постійно перемішувати. «Незважаючи на те, що останніми роками такі роботи вже отримали розвиток, створення робота-кухаря в напівструктурованому кухонному середовищі — поки що грандіозне завдання», — зазначають вчені.

Вони додали, що новий механізм розглядаєкоординацію як проблему передачі послідовності між рухами обох рук та використовує для цього комбіновану модель трансформатора та GNN. Тому в інтерактивному процесі рух лівої руки коригується відповідно до візуального зворотного зв'язку, а відповідний рух правої руки генерується попередньо навченою структурно-трансформаторною моделлю на основі рухів лівої руки.

Дослідники оцінили роботу своєї моделі яксимуляціях, так і на фізичній дворучній роботизованій платформі. У цих тестах модель дозволила роботу успішно та реалістично відтворити рухи, пов'язані з приготуванням смаженої картоплі.

У майбутньому модель представлена ​​групоюдослідників може дозволити розробити роботів, здатних готувати їжу як в домашніх умовах, так і в громадських місцях. Крім того, цей же підхід може бути використаний для навчання роботів іншим завданням, які передбачають використання двох рук та кистей.

«Тепер ми будемо вводити більш високорозмірнуінформацію для вивчення рухів гуманоїдів при роботі на кухні, наприклад, візуальні сигнали та сигнали електроміографії, - зазначають вчені. — Таким чином, ми також плануємо запропонувати більш комплексну систему, яка включатиме як рухи бімануальних маніпуляторів, так і зміну стану об'єкта».

Читати далі

Квантовий симулятор показав поділ електрона на частини в одновимірному просторі.

Фізики створили атомний лазер, який може працювати вічно

Неподалік Землі знайшли дві планети, які дуже схожі на нашу.