NVIDIA verwandelt 2D-Fotos mit seiner KI | in 3D-Szenen Video
Nvidia hat das angekündigt Ende März rief eine neue Technologie an Neuronale Strahlungsfelderoder Nerf. Dies verspricht, eine Sammlung von Standbildern, eindeutig in zwei Dimensionen, in Sekundenschnelle in eine digitale 3D (dreidimensionale) Szene umzuwandeln. Alles war nur durch Verbessern und Testen möglich Intelligenz künstlich die er zur Verfügung hat. Lassen Sie uns im Detail sehen, wie es funktioniert und was der Effekt ist.
NVIDIA Research verwandelt 2D-Fotos mit künstlicher Intelligenz im Handumdrehen in 3D-Szenen. Hier wird wie in einem Video gezeigt
Das Ergebnis ist nach Angaben des Unternehmens ein neuronales Rendering-Modell, das lernt eine hochauflösende 3D-Szene in Sekunden und kann die Bilder dieser Szene in Millisekunden rendern, alles mit künstlicher Intelligenz (KI). Der als Reverse Rendering bekannte Tuning-Prozess von NVIDIA verwendet künstliche Intelligenz für nähern sich dem Verhalten von Licht in der realen Welt, sodass Entwickler eine 3D-Szene aus einer Handvoll 2D-Bildern rekonstruieren können, die aus verschiedenen Blickwinkeln aufgenommen wurden.
Das Forschungsteam von NVIDIA hat einen Ansatz entwickelt, der diese Aufgabe nahezu augenblicklich erledigt, und ist damit eines der ersten Modelle seiner Art, das blitzschnelles „Training“ und „Training“ neuronaler Netze kombiniert Rendering schnell. Als Hommage an die Anfänge der Polaroid-Bildgebung hat NVIDIA Research ein ikonisches Foto von neu erstellt Andy Warhol der einen Schnappschuss gemacht und ihn mit InstanT NeRF in eine 3D-Szene verwandelt hat.
NVIDIAs Instant NeRF kann verwendet werden Erstellen Sie Avatare oder Szenen für die metaverse, geben Sie Videokonferenzteilnehmer ein oder rekonstruieren Sie Szenen für digitale 3D-Karten. David Lübke, Vizepräsident für Forschung bei NVIDIA Graphics, sagt:
Während traditionelle 3D-Darstellungen wie Polygonnetze Vektorbildern ähneln, sind NeRFs wie Bitmap-Bilder: Sie erfassen dicht, wie Licht von einem Objekt oder einer Szene ausstrahlt
Laut NVIDIA ist Instant NeRF das schnellste bisher entwickelte NeRF-Technik. Das Modell kann eine 3D-Szene in etwa zehn Millisekunden rendern.
