AI sa naučila generovať 3D hologramy v reálnom čase

Výskumníci sa dlho snažili vytvoriť počítačom generované hologramy, ale proces

vyžadoval superpočítač, ktorý byvykonali fyzikálne simulácie, ktoré sú časovo náročné a prinášajú menej fotorealistické výsledky. Teraz výskumníci MIT vyvinuli nový spôsob, ako okamžite vytvárať hologramy, a metóda založená na hlbokom učení je taká výkonná, že ju možno spustiť aj na notebooku.

"Predtým si vedci mysleli, že s existujúcimi."spotrebiteľský hardvér nemôže vykonávať výpočty 3D holografie v reálnom čase, “uviedol Liang Shi, hlavný autor štúdie a postgraduálny študent na Katedre elektrotechniky a počítačového inžinierstva (EECS) na MIT.

Shi verí, že nový prístup, ktorý tím nazýva „tenzorová holografia“, pomôže rýchlejšie dosiahnuť tento cieľ. To pomôže vytvoriť holografiu v 3D a VR.

Na urýchlenie využívali hlboké učeniepočítačová holografia, ktorá umožňuje ich generovanie v reálnom čase. Tím navrhol konvolučnú neurónovú sieť, technológiu spracovania, ktorá pomocou reťazca trénovateľných tenzorov zhruba napodobňuje, ako človek spracováva vizuálne informácie. Výcvik neurónovej siete zvyčajne vyžaduje vysoko kvalitný súbor údajov, ktorý predtým pre hologramy 3D neexistoval.

Tím vytvoril vlastnú databázu,pozostávajúci zo 4 tisíc párov obrazov generovaných počítačom. Na vytvorenie hologramov v novej databáze použili vedci scény so zložitými a variabilnými tvarmi a farbami, s jednotnými hĺbkami pixelov od pozadia po popredie a s novou sadou výpočtov založených na fyzike, ktoré zvládli oklúziu.

Učenie na každej dvojici obrázkov, tenzorsieť vylepšila svoje vlastné výpočtové parametre a neustále zlepšovala svoju schopnosť vytvárať hologramy. Plne optimalizovaná sieť bežala o rádovo rýchlejšie ako fyzické výpočty.

Čítaj viac

Fyzici vytvorili analóg čiernej diery a potvrdili Hawkingovu teóriu. Kadiaľ vedie?

Morské slimáky im odrezali hlavu, aby zregenerovali nové telo

Potraty a veda: čo sa stane s deťmi, ktoré budú rodiť