„Apple“ sukūrė neuroninį tinklą „NeuMan“, kuris mokosi iš trumpų vaizdo įrašų ir gali kurti
Norint išmokyti neuroninį tinklą, pakanka 10 sekundžių vaizdo įrašo, nufilmuoto judančia kamera. Programa iš vaizdo įrašo išgauna žmogaus ir aplinkos vaizdą.
Po to NeuMan gali susintetinti klipuskurį tas pats veikėjas atliks skirtingus veiksmus. Pavyzdžiui, šokiai, salto ar šokinėjimas. Naujasis vaizdo įrašas turi mažiau ryškumo, tačiau apskritai jie atrodo kaip tikri prastos kokybės filmuota medžiaga.
Demonstracinis vaizdo įrašas: šokantis vyras. Vaizdo įrašas: Apple
Pagrindinis programos tikslas, kaip nurodytakūrėjai yra papildytos realybės programos. Jie taip pat pažymi, kad neuroniniam tinklui lavinti naudojami du NeRF (neuroradialinės spinduliuotės) modeliai: pirmasis tiria žmogų, antrasis – foną. Šių modelių pagalba neuroninis tinklas išmoksta grubią žmogaus ir scenos geometriją. Ir tada gali jį atkurti naujomis formomis.
Demonstracinis vaizdo įrašas: įkrovimas. Vaizdo įrašas: Apple
Tuo pačiu metu, kaip pažymi tyrėjai, laikysena, kurią žmogus užima fotografuodamas, neturi įtakos baigto vaizdo įrašo kokybei.
Skaityti daugiau:
Rekordinis vainikinės masės išmetimas Betelgeuse yra 400 milijardų kartų didesnis už saulę
Megalodonas vienu metu suvalgė banginio žudiko dydžio gyvūną
Everestas aptiko DNR pėdsakų, kurių ten neturėtų būti