AI se naučila generovat 3D hologramy v reálném čase

Výzkumníci se dlouho snažili vytvořit počítačem generované hologramy, ale proces

vyžadoval superpočítač, který byprovedli fyzikální simulace, které jsou časově náročné a poskytují méně fotorealistické výsledky. Nyní výzkumníci MIT vyvinuli nový způsob, jak okamžitě vytvářet hologramy, a metoda založená na hlubokém učení je tak výkonná, že ji lze spustit na notebooku.

"Dříve si vědci mysleli, že u existujícího."spotřebitelský hardware nemůže provádět výpočty 3D holografie v reálném čase, “uvedl Liang Shi, hlavní autor studie a postgraduální student na katedře elektrotechniky a informatiky (EECS) na Massachusetts Institute of Technology (MIT).

Shi věří, že nový přístup, který tým nazývá „tenzorovou holografií“, pomůže dosáhnout tohoto cíle rychleji. To pomůže vytvořit holografii ve 3D a VR.

K urychlení použili hluboké učenípočítačová holografie, která umožňuje jejich generování v reálném čase. Tým navrhl konvoluční neuronovou síť, technologii zpracování, která využívá řetězec trénovatelných tenzorů zhruba k napodobení toho, jak člověk zpracovává vizuální informace. Výcvik neuronové sítě obvykle vyžaduje vysoce kvalitní datový soubor, který pro 3D hologramy dříve neexistoval.

Tým vytvořil vlastní databázi,skládající se ze 4 tisíc párů obrazů generovaných počítačem. K vytvoření hologramů v nové databázi vědci použili scény se složitými a proměnlivými tvary a barvami, s jednotnými hloubkami pixelů od pozadí k popředí a novou sadou výpočtů založených na fyzice pro zvládnutí okluze.

Učení na každém páru obrázků, tenzorsíť vylepšila své vlastní výpočetní parametry a neustále zlepšovala svoji schopnost vytvářet hologramy. Plně optimalizovaná síť provedla řádově rychleji než fyzické výpočty.

Přečtěte si více

Fyzici vytvořili analogii černé díry a potvrdili Hawkingovu teorii. Kam to vede?

Mořští slimáci jim odřízli hlavu, aby zregenerovali nové tělo

Potrat a věda: co se stane s dětmi, které porodí