Дослідники тривалий час прагнули створити голограми, які генерує комп'ютер, але цей процес
«Раніше вчені думали, що при існуючомуобладнанні споживчого класу неможливо виконувати обчислення для 3D-голографії в реальному часі », - зазначає Лианг Ши, провідний автор дослідження і аспірант кафедри електротехніки та обчислювальної техніки (EECS) Массачусетського технологічного інституту (MIT).
Ши вважає, що новий підхід, який команда називає «тензорною голографією» допоможе досягти цієї мети швидше. Це допоможе створювати голографію в 3D і VR.
Вони використовували глибоке навчання для прискореннякомп'ютерної голографії, дозволяючи генерувати їх в реальному часі. Команда спроектувала сверточное нейронну мережу - технологію обробки, що використовує ланцюг тренованих тензорів, щоб грубо наслідувати того, як людина обробляє візуальну інформацію. Навчання нейромережі зазвичай вимагає високоякісного набору даних, якого раніше не існувало для 3D-голограм.
Команда створила призначену для користувача базу даних,що складається з 4 тис. пар зображень, що генеруються комп'ютером. Для створення голограм в новій базі даних дослідники використовували сцени зі складними і змінними формами і квітами, з рівномірним розподілом глибини пікселів від фону до переднього плану, а також з новим набором розрахунків на основі фізики для обробки оклюзії.
Навчаючись на кожній парі зображень, тензорнамережу підбудовувала параметри власних обчислень, послідовно підвищуючи свою здатність створювати голограми. Повністю оптимізована мережа працювала на порядок швидше, ніж фізичні розрахунки.
Читати далі
Фізики створили аналог чорної діри і підтвердили теорію Хокінга. До чого це призведе?
Морські слимаки відрізають собі голову, щоб регенерувати нове тіло
Аборти і наука: що буде з дітьми, яких народять