Forskere træner AI til at styre robotarm baseret på YouTube-video

Forskere fra Carnegie Mellon University har skabt et fjernbetjeningssystem til automatiseret

hånd. Alt du skal gøre er at stå foran kameraet og udføre de nødvendige handlinger. AI, baseret på et todimensionelt billede, genererer en tredimensionel bevægelsesmodel og danner en algoritme for en robotarm.

Traditionelt til træning og fjernundervisningrobotter blev styret ved hjælp af specielle handsker, bevægelsessensorer eller kalibrerede systemer bestående af flere kameraer. Den løsning, der foreslås i undersøgelsen, kræver ikke sofistikeret udstyr og forenkler i høj grad processen med fjernbetjening. "Vores system fungerer ved hjælp af et enkelt kamera. Da kalibrering ikke er påkrævet, kan brugeren stå hvor som helst og stadig kontrollere robotten med succes,” siger Deepak Pathak, en af ​​udviklerne af systemet.

Menneskelige og robothænder adskiller sig markant ileddenes form, størrelse og struktur. De bevægelsesbaner, der optages af kameraet, skal ikke kun gengives, men også konverteres til en række handlinger af robottens strukturelle elementer. Især brugte forskerne kun YouTube-videoer til at træne deres system.

"Vi forstår, at klassiske dataindsamlingsmodeller kræver betydelige omkostninger," bemærker forskerne. "Samtidig er der en masse videoer af menneskelige håndbevægelser på internettet."

De første resultater af undersøgelsenlovende: Selv utrænede brugere kan fjernstyre robotten. "Personligt er den vigtigste del af forskningen for mig brugen af ​​ustrukturerede data fra internettet til robotteknologi," tilføjer Pathak. “Vores fjernbetjeningssystem kræver ikke handsker eller markører og gør robottræning mere tilgængelig. Vi håber, at det vil hjælpe med at skabe autonome mekanismer."

Læs mere

Forskere har fundet de sundeste mennesker på jorden: det handler om en unik livsstil

Faren ved gratis VPN'er. Hvorfor kan de ikke downloades, og hvordan beskytter du dig selv?

Fysikere har genskabt T-1000'ens evner fra "Terminator-2" i laboratoriet