Apple je razvio neuronsku mrežu nazvanu NeuMan koja uči iz kratkih videa i može generirati
Za treniranje neuronske mreže dovoljan je video od 10 sekundi snimljen kamerom u pokretu. Program izdvaja sliku osobe i okoline iz videa.
Nakon toga, NeuMan može sintetizirati isječke, nakojim će isti lik izvoditi različite radnje. Na primjer, ples, salto ili skakanje. Novi video ima manje oštrine, ali općenito izgledaju kao prave snimke loše kvalitete.
Demo video: Dancing Man. Video: Apple
Glavna svrha programa, kao što je naznačenoprogrameri su aplikacije za proširenu stvarnost. Također napominju da se za treniranje neuronske mreže koriste dva NeRF (neuroradial radiation) modela: prvi proučava osobu, a drugi proučava pozadinu. Uz pomoć ovih modela, neuronska mreža uči grubu geometriju osobe i scene. A onda ga možete ponovno stvoriti u novim oblicima.
Demo video: punjenje. Video: Apple
Istodobno, kako napominju istraživači, držanje koje osoba zauzima tijekom snimanja ne utječe na kvalitetu gotovog videa.
Čitaj više:
Rekordno izbacivanje koronalne mase u Betelgeuseu je 400 milijardi puta veće od Sunca
Megalodon je odjednom pojeo životinju veličine kita ubojice
Everest je pronašao tragove DNK koji tamo ne bi trebali biti