Nvidia visar teknik som gör foton till 3D-scener
NeRF fixar det på några millisekunder
I veckan som gick så arrangerade Nvidia sin utvecklarkonferens där man visade upp både ny hård- och mjukvara. En av grejerna man visade upp var en teknik för att snabbt kunna göra 3D-scener baserade på vanliga stillbilder i 2D.
Tekniken kallas för NeRF (Neural Radiance Fields) och använder sig av ett neuralt nätverk för att göra realistiska 3D-scener från 2D-bilder. NeRF behöver bara träna på ett antal stillbilder under några sekunder samt förses med data om positionen på kameran som fotograferade bilderna. Därefter kan det neurala nätverket skapa 3D-scener på bara några millisekunder skriver Nvidia i ett blogginlägg. David Luebke, Nvidias chef för forskning inom grafik, säger om NeRF:
"If traditional 3D representations like polygonal meshes are akin to vector images, NeRFs are like bitmap images: they densely capture the way light radiates from an object or within a scene. In that sense, Instant NeRF could be as important to 3D as digital cameras and JPEG compression have been to 2D photography — vastly increasing the speed, ease and reach of 3D capture and sharing."
Nvidia tror att NeRF-tekniken i framtiden skulle kunna användas för att till exempel skapa digitala avatarer, skapa miljöer till virtuella världar, skapa 3D-representationer av deltagare och miljöer i videokonferenser och olika 3D-miljöer i digitala karttjänster.
I klippet ovan kan ni kolla in här Nvidia skapat en 3D-scen baserad på några foton där man försökt återskapa ett klassiskt fotografi av Andy Warhol och en polarioidkamera.
Läs gärna våra regler!