OpenAI oppi pelaamaan Minecraftia katsomalla 70 000 tuntia YouTube-videoita

Kehittäjät kertovat, että tekoäly on oppinut perustaidot, kuten puiden kaatamisen, lankkujen tekemisen ja

pöytäten teko askarteluun.He myös havaitsivat hänet uimassa, metsästämässä, ruoanlaitossa ja "pylväshyppyssä". Lisäksi perustaidot hallittuaan järjestelmä oppi kuinka luoda timanttihakku. Ihmispelaajat tarvitsevat noin 20 minuuttia harjoitellakseen tätä taitoa pelissä. ja 24 tuhatta toimenpidettä.

Tekoälykoulutuksessa OpenAI-tiimi käyttiavoimet videot: noin 70 000 tuntia pelimateriaalia. Selviytyäkseen tästä määrästä yritys kehitti uuden strategian: esikoulutus "puoliopettajan" kanssa.

Oppimissuunnitelma.Ensimmäinen vaihe on videon haku harjoittelua varten, toinen vaihe on IDM-hermoverkon harjoitteleminen hiiren liikkeistä ja näppäinpainalluksista tietoa sisältävän videon perusteella, kolmas vaihe on videon merkintä IDM:llä ja pelin hermoverkon koulutus. Lähde: OpenAI

Ensimmäisessä vaiheessa tutkijat keräsivät tietojavapaaehtoiset: he tallensivat videopelejä sekä näppäinpainalluksia ja hiiren liikkeitä. Näiden tietojen perusteella kehittäjät kouluttivat käänteisen dynamiikan mallin (IDM) määrittääkseen, mitä toimintoja soitin suorittaa, perustuen vain videodataan. Sen jälkeen IDM "katsoi" ja merkitsi itsenäisesti YouTubessa julkaistut pelin tallenteet. AI-peliharjoittelu suoritetaan jo merkityllä IDM-datalla.

Kehittäjät huomauttavat, että käyttäytymismalliKloonaaja ("soitin"), joka on koulutettu IDM-merkitty verkkovideoon, suorittaa Minecraftissa tehtäviä, joita on lähes mahdoton suorittaa perinteisellä vahvistusoppimisella tyhjästä. Hän oppii kaatamaan puita tukkien keräämiseksi, muuttamaan ne lankuiksi ja tekemään lankuista sitten askartelupöydän. Tämä sarja kestää noin 50 sekuntia tai tuhat peräkkäistä pelitoimintoa henkilöltä, joka omistaa Minecraftin.

Kehittäjät osoittivat myös, että pelin todellisen prosessin tekoälyhavainnoinnin avulla tapahtuva lisähienosäätö auttaa nopeasti opettamaan mallille monimutkaisempia taitoja.

Tutkijat huomauttavat, että Minecraft onvain yksi esimerkki uuden teknologian mahdollisesta soveltamisesta. Yleensä esikoulutus antaa tekoälylle mahdollisuuden käyttää minimaalisia resursseja erilaisten taitojen hankkimiseen suuren videodatamäärän perusteella.

Lue lisää:

Avaruusluotain lensi 200 kilometrin päässä Merkuriuksesta. Katso mitä hän näki

Kiinalainen ajatustenlukukypärä hälyttää, kun henkilö näkee pornosisältöä

Jupiterin satelliittia katsottiin uudessa valossa: mitä tiedemiehet näkivät siellä