3D MoMa-tool van Nvidia maakt met AI 3D-modellen van 2D-foto's

0 reacties

Volgens Nvidia's vicepresident van grafisch onderzoek David Luebke is het omzetten van foto's naar ruimtelijke modellen iets wat lange tijd gezien werd als de heilige graal van computer vision en computer graphics. Nvidia lijkt nu met de 3D MoMa-rendersoftware in de buurt te zijn gekomen. De techgigant belooft dat de ai-gebaseerde tool architecten, ontwerpers, kunstenaars en andere professionals moet helpen om eenvoudig objecten in te laden in hun software.

De vorm die hiervoor gebruikt wordt is een netwerk van driehoeken zoals in 3d-ontwerp en games gebruikt wordt. Daarom is het format compatibel met veelgebruikte editing-software en kunnen er na het inladen allerlei bewerkingen op uitgevoerd worden, zoals schalen, vervormen en het aanpassen van textuur en kleur.

Het 3d-model wordt gevormd aan de hand van foto's van het betreffende object. Het materiaal bestaat uit een 2d-beeld dat over het model wordt gelegd, en de verlichting is gebaseerd op de foto's. Met een enkele Tensor-core in een Nvidia-gpu kan binnen een uur een model gegenereerd worden.


De fabrikant demonstreert dit met vijf verschillende muziekinstrumenten, waarvan 100 foto's gemaakt werden. In de gedeelde video is zichtbaar dat deze reageren op licht als dit van een andere hoek komt. In de paper "Extracting Triangular 3D Models, Materials, and Lighting From Images" wordt verder ingegaan op de werking van de software.

Bron: HotHardware

« Vorig bericht Volgend bericht »
0