Дослідники з Google представили детальні 3D сцени знаменитих пам'яток по всьому світу. Вони
На сторінці проекту в GitHub дослідникиподілилися 3D-сценами Бранденбурзьких воріт у Берліні, храму Базиліка Сакре-Кер в Парижі і фонтану Треві в Римі. Машинне навчання створило з цього матеріалу детальний 3D-рендеринг, в якому можна переміщати вид, а зовнішня сцена змінюється під дією світлових ефектів.
Our paper, "NeRF in the Wild", is out!NeRF-W is a method for reconstructing 3D scenes from internet photography. We apply it to the kinds of photos you might take on vacation: tourists, poor lighting, filters, and all. https://t.co/lawLB4eEup (1 / n) pic.twitter.com/UuvUm4eVzm
— Daniel Duckworth (@duck) August 6, 2020
Дослідники пояснили, що їх алгоритм можезіткнутися з труднощами при використанні зображень з «незвичайними параметрами». Фотографії обробляються некоректно при поганому світлі, експозицію або постобробці. Крім того, на знімках з інтернету часто є рухомі об'єкти - наприклад, люди або автомобілі. Вони також можуть перешкодити алгоритму.
«Два фотографа можуть стояти на одному місці ізробити знімок однієї і тієї ж пам'ятки, але один кадр алгоритм обробить коректно, а другий - зіпсує. Нам потрібно доопрацювати ІІ, щоб він працював коректно », - відзначили дослідники.
Отримана модель може містити ґлітч або інші помилки. Дослідники розробляють спеціальні розширення, які пом'якшують обробку за допомогою ІІ, це призводить до більш якісних результатів.
Читайте також:
- Останній шельфовий льодовик в Канаді обрушився в океан. Він втратив 40% за два дні
- Подивіться, що здатний побачити в космосі наступник Хаббла. Огляд телескопа Уебб
- Росія відкрила авіасполучення з низкою країн. Наскільки безпечно туди летіти?