Polaroid του μέλλοντος: Το νέο νευρωνικό δίκτυο της NVIDIA μετατρέπει τις εικόνες 2D σε τρισδιάστατα μοντέλα

Εταιρεία NVIDIA εισήχθη το νέο της νευρωνικό δίκτυο, που ονομάζεται Instant NeRF. Κολλάει αμέσως μια σειρά από φωτογραφίες 2D και ολοκληρώνει την εικόνα σε μια τρισδιάστατη σκηνή. Ως αποτέλεσμα, ένα αντικείμενο από μια επίπεδη εικόνα γίνεται τρισδιάστατο.

Αυτό το νευρωνικό δίκτυο έχει ονομαστεί το "Polaroid του Μέλλοντος" επειδή το ολοκληρωμένο τρισδιάστατο μοντέλο αποκτάται σε λίγα δευτερόλεπτα. Ως φόρο τιμής στη μάρκα Polaroid, η NVIDIA Research αναδημιούργησε την εμβληματική φωτογραφία του Andy Warhol σε 3D.

Οι προγραμματιστές σημειώνουν: Το Instant NeRF χρησιμοποιεί αντίστροφη απόδοση για να προσεγγίσει τη συμπεριφορά του φωτός μέσα τον πραγματικό κόσμο, επιτρέποντας την ανακατασκευή μιας τρισδιάστατης σκηνής από πολλαπλές εικόνες 2D που έχουν ληφθεί κάτω από διαφορετικές γωνίες.

Χρειάζονται μόνο λίγα δευτερόλεπτα για να μάθει ένα μοντέλο από δεκάδες στατικές φωτογραφίες. Επίσης νευρικό σύστημα θα πρέπει να λαμβάνει υπόψη τα δεδομένα για τις γωνίες της κάμερας από τις οποίες τραβήχτηκαν οι φωτογραφίες.

Η τεχνολογία λειτουργεί καλύτερα με κουφώματα όπου υπάρχει ελάχιστη κίνηση και μόνο ένα κύριο αντικείμενο. Διαφορετικά, η τρισδιάστατη σκηνή που δημιουργείται από την τεχνητή νοημοσύνη μπορεί να είναι θολή.

Το Instant NeRF μπορεί να χρησιμοποιηθεί για τη δημιουργία avatar ή σκηνών για εικονικούς κόσμους, την καταγραφή των συμμετεχόντων σε βιντεοδιάσκεψη και του περιβάλλοντός τους σε 3D και για την ανακατασκευή σκηνών για ψηφιακούς τρισδιάστατους χάρτες. Αν και είναι αδύνατο να δοκιμαστεί η τεχνολογία, αλλά στο μέλλον η NVIDIA μπορεί κάλλιστα να ανοίξει την πρόσβαση σε αυτήν.