Unique3D: Malla 3D des d’una imatge
Unique3D és un sistema innovador per a la generació de malles 3D d’alta qualitat a partir d’una única imatge RGB ortogonal. Aquest sistema pot produir malles texturitzades d’alta fidelitat en menys de 30 segons, aconseguint una alta qualitat en textura i detalls geomètrics.
A diferència de mètodes anteriors que patien d’inconsistències i temps d’optimització llargs, Unique3D utilitza un model de difusió multi-vista juntament amb un model de difusió normal per generar imatges multi-vista i els seus mapes normals corresponents. A través d’un procés de millora de resolució en múltiples nivells, es generen imatges ortogràfiques multi-vista d’alta resolució.
Finalment, es reconstrueixen malles 3D d’alta qualitat utilitzant l’algorisme de reconstrucció de malles ISOMER, que integra completament els priors de color i geometria en els resultats de la malla. Els experiments demostren que Unique3D supera significativament a altres mètodes en termes de detalls geomètrics i texturals.
Mètodes:
- Model de difusió multi-vista: Genera imatges des de múltiples vistes ortogràfiques.
- Model de difusió normal: Genera mapes normals corresponents a les imatges multi-vista.
- Procés d’upscale: Millora la resolució de les imatges generades en múltiples nivells.
Unique3D s’entrena utilitzant només 8 GPUs RTX4090 en 5 dies, demostrant eficiència i robustesa en la generació de malles 3D d’alta qualitat a partir d’una única imatge.
