Divkājains robots iemācās staigāt, izmantojot pastiprināšanas mācības

Darbā tika izveidots divkājains robots. Viņa ekstremitāšu pāris ir savienoti kopā ar nelielu

Tagad robots, kuru autori nosauca par "Cassie", veic savus uzdevumus, kas saistīti ar rāmi, kuru tas kontrolēSalīdzinot ar citiem robotiem, piemēram, tiem, kurus izstrādājusi Boston Dynamics, Kasija šķiet primitīva.Tomēr tā ir progresīva jauna veida tehnoloģija, kurā robotsViņš iemācās staigāt pats bez tiešas programmēšanas vai imitācijas.

Kā cilvēki iemācās staigāt?Izmantojot pastiprināšanas mācīšanos! Zīdaiņi apgūst šo prasmi, izmēģinot jaunas kustības. Viņi nesaprot visu procesu uzreiz, bet atceras soļus, kas ved uz staigāšanu. Pēc tam balstieties uz iemācīto, pievienojot papildu informāciju, kas galu galā noved pie pareizas pastaigas. Tajā pašā laikā bērni neapstājas pie tā; viņi turpina mācīties, un viņu gaita kļūst labāka. Laika gaitā bērni apgūst jaunas metodes, piemēram, skriešanu un lekt.

Lai palīdzētu robotam iemācīties staigāt šādiTādējādi pētnieki sāka, imitējot to virtuālajā pasaulē. Tur robots tiek apmācīts, izmantojot informāciju, un AI to varētu iegaumēt un izmantot. Simulācija ļāva robotam iemācīties staigāt, nesabojājot aprīkojumu.

Kad robots ir iemācījies staigāt simulācijā,исследователи передали его знания «Кэсси», которая использовала их для ходьбы, как у младенцев. И, как малыш, «Кэсси» она совершенствовала свои навыки. Она научилась не падать при небольшом скольжении или восстанавливаться, когда её толкают сбоку. Кроме того, ей удалось научить компенсировать ущерб, когда оба её двигателя повреждены. Исследователи планируют продолжить свою работу с обучением с подкреплением в роботах, чтобы увидеть, насколько далеко они могут зайти.

Lasīt vairāk

Tika izveidota pirmā precīzā pasaules karte. Kas vainas visiem pārējiem?

Urāns ir saņēmis visdīvainākās Saules sistēmas planētas statusu. Kāpēc?

NASA pastāstīja, kā viņi nogādās Marsa paraugus uz Zemes