"A jövő polaroidja": mire képes az NVIDIA neurális hálózata képekből azonnal 3D objektumok létrehozására

Márciusban az NVIDIA bemutatta az NVIDIA Instant NeRF neurális hálózati modellt, amely képes átalakulni

fényképeket háromdimenziós tárgyakká alakítani. Már a „jövő polaroidja” becenevet is kapta. Beszéljétek meg

A modell bemenete egy képsorozatkülönböző szögekből. Minél több fénykép, annál több részletet tárol az eredmény. Az NVIDIA szerint a neurális hálózat korai verziói néhány perc alatt háromdimenziós jeleneteket tudtak renderelni, és órákba telt a modell betanítása. Ezt a folyamatot felgyorsították. A modell akkor működik a legjobban, ha több tenzormagos grafikus kártyát használ.

A mérnökök több videót is megosztottak az NVIDIA Instant NeRF működéséről: