NeRF ('Neural Radiance Fields') es una tecnología que crea composiciones en 3D a partir de imágenes fijas. NeRF es una gran solución de la Inteligencia Artificial (AI) a la eterna búsqueda del mejor sistema para comprender la profundidad de una escena y crear objetos en 3D más realistas. Quienes desarrollaron esta innovación NeRF fueron los investigadores de Nvidia, en específico su división Nvidia Labs.
Todas las grandes compañías y universidades están investigando en esta innovación de innumerables aplicaciones. Como son los casos de Google Brain Team en Berlín, la Berkeley University o la Cornell University, Waymo con su Block NeRF, además de Nvidia NeRF,...
El último uso de esta tecnología ha sido publicado en ArXiv y se nos presenta como un método basado en 'machine learning' para recrear de forma compleja una escena al aire libre basándose en fotos aleatorias. Es decir, a partir de fotos normales poder recrear en tres dimensiones ese mismo edificio o monumento.
Con ayuda de Aitor y su potente ordenador, siguiendo instrucciones de MetAntonio (Antonio Martínez), hemos aplicado NeRF a la transformación de imágenes en 2 dimensiones para obtener un modelo en 3 dimensiones o 3D. Hemos elegido el Tesla Model 3 para unos primeros ensayos.
Otra fórmula ha sido utilizar el LIDAR del iPhone 13 Pro Max, con este resultado (que repetiremos pronto para evitar reflejos). Sería muy mejorable si hubiésemos dedicado más tiempo al escaneo previo, dado que apenas estuvimos un minuto rodeando el coche. En este enlace pueden verse un álbum con otras composiciones con el LIDAR.
En efecto, la ventaja del NeRF es con respecto a los objetos transparentes y superficies reflectantes con las que la fotogrametría tiene problemas. Así mismo, también las redes NERF permiten capturar espacios más amplios y mover a través de ellos. El LIDAR (Light Detection and Ranging o Laser Imaging Detection and Ranging) falla cuanto más grandes sean las superficies, por lo que hacer fotogrametría de un edificio sería complicado.
Finalmente, la tecnología ha provocado una evolución de los bidimensionales selfies en nerfies tridimensionales.
Our paper, “NeRF in the Wild”, is out! NeRF-W is a method for reconstructing 3D scenes from internet photography. We apply it to the kinds of photos you might take on vacation: tourists, poor lighting, filters, and all. https://t.co/lawLB4eEup (1/n) pic.twitter.com/UuvUm4eVzm
— Daniel Duckworth (@duck) August 6, 2020
0 comments:
Publicar un comentario