Unique3D: Malla 3D desde una imagen
Unique3D es un sistema innovador para la generación de mallas 3D de alta calidad a partir de una única imagen RGB ortogonal. Este sistema puede producir mallas texturizadas de alta fidelidad en menos de 30 segundos, logrando una alta calidad en textura y detalles geométricos.
A diferencia de métodos anteriores que sufrían de inconsistencias y tiempos de optimización largos, Unique3D utiliza un modelo de difusión multi-vista junto con un modelo de difusión normal para generar imágenes multi-vista y sus mapas normales correspondientes. A través de un proceso de mejora de resolución en múltiples niveles, se generan imágenes ortográficas multi-vista de alta resolución.
Finalmente, se reconstruyen mallas 3D de alta calidad utilizando el algoritmo de reconstrucción de mallas ISOMER, que integra completamente los priors de color y geometría en los resultados de la malla. Los experimentos demuestran que Unique3D supera significativamente a otros métodos en términos de detalles geométricos y texturales.
Métodos:
- Modelo de difusión multi-vista: Genera imágenes desde múltiples vistas ortográficas.
- Modelo de difusión normal: Genera mapas normales correspondientes a las imágenes multi-vista.
- Proceso de upscale: Mejora la resolución de las imágenes generadas en múltiples niveles.
Unique3D se entrena utilizando solo 8 GPUs RTX4090 en 5 días, demostrando eficiencia y robustez en la generación de mallas 3D de alta calidad a partir de una única imagen.
