"Polaroid der Zukunft": Was ist das neuronale Netzwerk von NVIDIA, das in der Lage ist, sofort 3D-Objekte aus Bildern zu erstellen?

Im März stellte NVIDIA das neuronale Netzwerkmodell NVIDIA Instant NeRF vor, das transformierbar ist

Fotografien in dreidimensionale Objekte. Sie wurde bereits als „Polaroid der Zukunft“ bezeichnet. Diskutieren

Die Eingabe des Modells ist eine Reihe von aufgenommenen Bildernaus verschiedenen Blickwinkeln. Je mehr Fotos, desto mehr Details werden im Ergebnis gespeichert. Laut NVIDIA konnten frühe Versionen des neuronalen Netzwerks dreidimensionale Szenen in wenigen Minuten rendern, und es dauerte Stunden, das Modell zu trainieren. Dieser Prozess wurde beschleunigt. Das Modell funktioniert am besten, wenn mehrere Grafikkarten mit Tensorkernen verwendet werden.

Die Ingenieure haben mehrere Videos geteilt, die die Arbeit von NVIDIA Instant NeRF demonstrieren: