„OpenAI“ išmoko žaisti „Minecraft“ žiūrėdama 70 000 valandų „YouTube“ vaizdo įrašų

Kūrėjai praneša, kad AI išmoko pagrindinių įgūdžių, tokių kaip medžių kirtimas, lentų gamyba ir

stalų gaminimas rankdarbiams.Jie taip pat stebėjo, kaip jis plaukia, medžioja, gamina maistą ir „šokinėja ant stulpo“. Be to, įvaldžiusi pagrindinius įgūdžius, sistema išmoko sukurti deimantinį kirtiklį. Norėdami praktikuoti šį įgūdį žaidime, žaidėjams reikia apie 20 minučių. ir 24 tūkst.

Dirbtinio intelekto mokymams OpenAI komanda naudojoatidaryti vaizdo įrašai: apie 70 000 valandų žaidimo filmuotos medžiagos. Siekdama susidoroti su šia apimtimi, įmonė sukūrė naują strategiją: išankstinius mokymus su „pusiau mokytoju“.

Mokymosi schema.Pirmasis etapas yra vaizdo įrašo paieška mokymuisi, antrasis etapas yra IDM neuroninio tinklo mokymas remiantis vaizdo įrašu, kuriame yra informacija apie pelės judesius ir klavišų paspaudimus, trečiasis etapas yra vaizdo įrašo žymėjimas naudojant IDM ir žaidimo neuroninio tinklo mokymas. Šaltinis: OpenAI

Pirmajame etape mokslininkai surinko duomenis išsavanoriai: jie įrašinėjo vaizdo žaidimus, taip pat klavišų paspaudimus ir pelės judesius. Remdamiesi šiais duomenimis, kūrėjai apmokė atvirkštinės dinamikos modelį (IDM), kad nustatytų, kokius veiksmus grotuvas atlieka tik pagal vaizdo duomenis. Po to IDM savarankiškai „žiūrėjo“ ir pažymėjo „YouTube“ paskelbtus žaidimo įrašus. AI mokymas žaidime vykdomas naudojant jau pažymėtus IDM duomenis.

Kūrėjai pažymi, kad elgesio modelisKlonuotojas („žaidėjas“), apmokytas prie IDM pažymėto internetinio vaizdo įrašo, „Minecraft“ atlieka užduotis, kurių beveik neįmanoma atlikti naudojant tradicinį pastiprinimo mokymąsi nuo nulio. Jis išmoksta nukirsti medžius, kad surinktų rąstus, paverstų tuos rąstus lentomis ir iš lentų pagamintų amatų stalą. Ši seka užtrunka apie 50 sekundžių arba tūkstantį iš eilės žaidimo veiksmų asmeniui, kuriam priklauso Minecraft.

Kūrėjai taip pat parodė, kad papildomas patikslinimas stebint tikrąjį žaidimo procesą AI padeda greitai išmokyti modelį įgyti sudėtingesnių įgūdžių.

Tyrėjai pastebi, kad „Minecraft“ yratik vienas galimų naujosios technologijos pritaikymo pavyzdžių. Apskritai, išankstinis mokymas leidžia AI naudoti minimalius išteklius įvairiems įgūdžiams įgyti, remiantis dideliu vaizdo duomenų kiekiu.

Skaityti daugiau:

Kosminis zondas nuskriejo 200 km nuo Merkurijaus. Pažiūrėk, ką jis matė

Kiniškas minčių skaitymo šalmas skamba pavojaus signalu, kai žmogus mato pornografinį turinį

Į Jupiterio palydovą buvo pažvelgta nauja šviesa: ką ten matė mokslininkai