NVIDIA Instant NeRF tehnologija pretvara 2D fotografije u 3D scene u roku od nekoliko sekundi

Novi metod koji je napravila Nvidia, spaja obuku neuronske mreže i brzo renderovanje, i jedan je od prvih modela te vrste koji to radi

 
Kompanija NVIDIA je razvila novi pristup inverznom renderovanju kako bi obučila AI algoritme i razvila 3D scenu od 2D fotografija snimljenih pod različitim uglovima za samo nekoliko sekundi. Ovaj metod spaja obuku neuronske mreže i brzo renderovanje, i jedan je od prvih modela te vrste koji to radi.Kompanija je primenila ovaj pristup na relativno noviju tehnologiju poznatu kao polja neuronskog zračenja (NeRF) i proizvela je „najbržu NeRF tehniku do sada“, Instant NeRF, koja je sposobna da postigne preko 1.000x ubrzanja u određenim slučajevima. Ovom modelu su potrebne sekunde da se primeni na nekoliko desetina fotografija zajedno sa metapodacima o uglovima kamere, a zatim može da prikaže rezultujuću 3D scenu u roku od „desetina milisekundi“.Potpredsednik za grafička istraživanja u NVIDIA, David Luebke je izjavio:

    “Ako su tradicionalne 3D reprezentacije poput poligonalnih mreža srodne vektorskim slikama, NeRF-ovi su poput bitmap slika: gusto hvataju način na koji svetlost zrači iz objekta ili unutar scene. U tom smislu, Instant NeRF bi mogao biti važan za 3D kao što su digitalne kamere i JPEG kompresija bile važne za 2D fotografiju — značajno povećavajući brzinu, lakoću i doseg 3D snimanja i deljenja.”

 

Kompanija kaže da bi Instant NeRF mogao da se koristi za razvoj avatara ili pejzaža u virtuelnim svetovima, prikazivanje učesnika video konferencije i njihovog okruženja u 3D, ili za rekonstrukciju scena za 3D digitalne mape.
 
Pogledajte još: Nvidia želi da proizvodi čipove sa Intelom
Putem Instant NeRF-a, NVIDIA je uspela da ponovo napravi fotografiju Endija Vorhola koji pravi trenutnu fotografiju, pretvarajući je u 3D scenu kako bi odala počast ranim danima Polaroid slika, navodi Neowin.Govoreći o novoj tehnici, kompanija je navela:

    “Iako je procena dubine i izgleda objekta na osnovu delimičnog pogleda prirodna veština za ljude, to je zahtevan zadatak za veštačku inteligenciju.    Pravljenje 3D scene tradicionalnim metodama traje satima ili duže, u zavisnosti od složenosti i rezolucije vizuelizacije. Unošenje veštačke inteligencije u sliku ubrzava stvari. Rani NeRF modeli su prikazivali oštre scene bez artefakata za nekoliko minuta, ali su i dalje bili potrebni sati za obuku.    Instant NeRF, međutim, skraćuje vreme renderovanja za nekoliko redova veličine. Oslanja se na tehniku koju je razvila NVIDIA pod nazivom kodiranje heš mreže u više rezolucija, koja je optimizovana za efikasan rad na NVIDIA GPU-ovima. Koristeći novu metodu kodiranja ulaza, istraživači mogu postići visokokvalitetne rezultate koristeći sićušnu neuronsku mrežu koja brzo radi.”

Ovaj model je proizveden korišćenjem NVIDIA CUDA alata i biblioteke Tini CUDA Neural Networks. Budući da je u pitanju lagana neuronska mreža, može se obučiti i pokrenuti na jednom NVIDIA GPU-u, sa poboljšanim performansama na Tensor jezgrima.
 
Benchmark možete pratiti i na društvenim mrežama | Facebook | Twitter | Instagram | YouTube |Na Benchmark forumu uvek možete učestvovati u kvalitetnim i aktuelnim diskusijama iz IT industrije

Ostani u toku

Prijavi se na newsletter listu i jednom nedeljno cemo ti poslati email sa najnovijim testovima i vestima iz sveta tehnologije.

Hvala!

Uspešno ste se prijavili na na naš newsletter! Proverite vaš email nalog kako bi potvrdili prijavu.

Možda vam se svidi
Polisa privatnosti

Ova veb stranica koristi kolačiće kako bismo vam pružili najbolje moguće korisničko iskustvo.

Informacije o kolačićima se čuvaju u vašem pretraživaču i obavljaju funkcije poput prepoznavanja kada se vratite na našu veb stranicu i pomažu našem timu da razume koje delove veb sajta smatrate najzanimljivijim i najkorisnijim.