Pesquisadores treinam IA para controlar braço robótico com base em vídeo do YouTube

Cientistas da Universidade Carnegie Mellon criaram um sistema de controle remoto para automação

mão. Tudo que você precisa fazer é ficar na frente da câmera e realizar as ações necessárias. A IA, baseada em uma imagem bidimensional, gera um modelo tridimensional de movimento e forma um algoritmo para um braço robótico.

Tradicionalmente para treinamento e ensino à distânciaos robôs eram controlados usando luvas especiais, sensores de movimento ou sistemas calibrados compostos por várias câmeras. A solução proposta no estudo não requer equipamentos sofisticados e simplifica muito o processo de controle remoto. “Nosso sistema funciona com uma única câmera. Como a calibração não é necessária, o usuário pode ficar em qualquer lugar e ainda controlar o robô com sucesso”, diz Deepak Pathak, um dos desenvolvedores do sistema.

Mãos humanas e robóticas diferem significativamente ema forma, o tamanho e a estrutura das articulações. As trajetórias de movimento que são registradas pela câmera não devem apenas ser reproduzidas, mas também convertidas em uma sequência de ações dos elementos estruturais do robô. Notavelmente, os pesquisadores usaram apenas vídeos do YouTube para treinar seu sistema.

“Entendemos que os modelos clássicos de coleta de dados exigem custos significativos”, observam os cientistas. “Ao mesmo tempo, existem muitos vídeos de movimentos de mãos humanas na Internet.”

Resultados iniciais do estudopromissor: mesmo usuários não treinados podem controlar remotamente o robô. “Pessoalmente, a parte mais importante da pesquisa para mim é o uso de dados não estruturados da Internet para robótica”, acrescenta Pathak. “Nosso sistema de controle remoto não requer luvas ou marcadores e torna o treinamento de robôs mais acessível. Esperamos que ajude na criação de mecanismos autônomos.”

Consulte Mais informação

Cientistas encontraram as pessoas mais saudáveis ​​da Terra: trata-se de um estilo de vida único

O perigo das VPNs gratuitas. Por que eles não podem ser baixados e como se proteger?

Físicos recriaram as habilidades do T-1000 do "Terminator-2" em laboratório