Apple on kehittänyt NeuMan-nimisen hermoverkon, joka oppii lyhyistä videoista ja voi luoda
Neuroverkon kouluttamiseen riittää 10 sekunnin video, joka on kuvattu liikkuvalla kameralla. Ohjelma poimii videosta kuvan ihmisestä ja ympäristöstä.
Sen jälkeen NeuMan voi syntetisoida leikkeitäjossa sama hahmo suorittaa erilaisia toimintoja. Esimerkiksi tanssiminen, kuperkeikka tai hyppääminen. Uudessa videossa on vähemmän terävyyttä, mutta yleisesti ottaen ne näyttävät aidolta ja huonolaatuiselta materiaalilta.
Demovideo: tanssiva mies. Video: Apple
Ohjelman päätarkoitus, kuten on ilmoitettukehittäjät ovat lisätyn todellisuuden sovelluksia. He huomauttavat myös, että hermoverkon harjoittamiseen käytetään kahta NeRF-mallia (neuroradial radiation), joista ensimmäinen tutkii henkilöä ja toinen taustaa. Näiden mallien avulla hermoverkko oppii ihmisen ja kohtauksen karkean geometrian. Ja sitten voi luoda sen uudelleen uusissa muodoissa.
Demovideo: lataus. Video: Apple
Samaan aikaan, kuten tutkijat huomauttavat, asento, jonka henkilö ottaa kuvauksen aikana, ei vaikuta valmiin videon laatuun.
Lue lisää:
Ennätyskoronaalimassan ejektio Betelgeusessa on 400 miljardia kertaa suurempi kuin aurinko
Megalodon söi miekkavalan kokoisen eläimen kerrallaan
Everest löysi DNA-jälkiä, joita ei pitäisi olla siellä