AI научи да генерира 3D холограми в реално време

Изследователите отдавна се стремят да създадат компютърно генерирани холограми, но процесът

изискваше суперкомпютър, който даизвършени физически симулации, които отнемат време и дават по-малко фотореалистични резултати. Сега изследователите на MIT са разработили нов начин за незабавно производство на холограми и методът, базиран на задълбочено обучение, е толкова мощен, че може да работи на лаптоп.

„Преди това учените смятаха, че със съществуващитепотребителски хардуер не може да извършва изчисления на 3D холография в реално време “, каза Лианг Ши, водещ автор на изследването и аспирант в катедрата по електрически и компютърни науки (EECS) в Масачузетския технологичен институт (MIT).

Ши вярва, че новият подход, който екипът нарича „тензорна холография“, ще помогне за постигането на тази цел по-бързо. Това ще помогне за създаването на холография в 3D и VR.

Използваха дълбоко обучение, за да ускоряткомпютърна холография, позволяваща им да се генерират в реално време. Екипът е проектирал конволюционна невронна мрежа, технология за обработка, която използва верига от обучими тензори, за да имитира грубо как човек обработва визуалната информация. Обучението на невронна мрежа обикновено изисква висококачествен набор от данни, който преди не е съществувал за 3D холограми.

Екипът е създал персонализирана база данни,състоящ се от 4 хиляди двойки изображения, генерирани от компютър. За да създадат холограми в новата база данни, изследователите са използвали сцени със сложни и променливи форми и цветове, с еднаква дълбочина на пикселите от фона до предния план и нов набор от физически изчисления за справяне с оклузията.

Учене на всяка двойка изображения, тензормрежата променя собствените си изчислителни параметри, като постоянно подобрява способността си да създава холограми. Напълно оптимизираната мрежа извърши порядък по-бързо от физическите изчисления.

Прочетете още

Физиците са създали аналог на черна дупка и са потвърдили теорията на Хокинг. Къде води?

Морските охлюви отрязват главата си, за да регенерират ново тяло

Аборт и наука: какво ще се случи с децата, които ще раждат