Sara Smolović
Naučnici su uspeli da rekonstruiše donekle uočljivo 3D okruženje, odnosno 3D scene, samo iz odsjaja očiju ljudi. Ovo je postignuto u 2D formatu fotografija uz pomoć tehnologije veštačke inteligencije pod imenom Neural Radiance Fields (NeRF), piše Engadget.
Iako pristup refleksiji očiju ima dug put do zapravo konkretne primene u svetu, studija pruža neverovatan uvid u tehnologiju koja bi na kraju mogla da otkrije okruženje u kojima se ljudi nalaze samo na osnovu serije portretnih fotografija.
world-from-eyes.github.io screenshotOsim što je ova tehnologija fascinantna, pomalo je i zastrašujuća. Ona na taj način može da postane još jedan dodatak brzom praćenju ljudi koje se već ostvaruje putem pametnih uređaja kao što su mobilni telefoni.
Način na koji je tim uspeo da rekonstruiše 3D okruženje iz odsjaja očiju
Istraživački tim uspeo je ovo da uradi koristeći suptilne refleksije svetlosti uhvaćene u odrazu ljudskih očiju, na osnovu uzastopnih fotografija snimljenih putem jednog senzora kamere. Istraživači su počeli sa nekoliko fotografija visoke rezolucije, a aparat kojim su snimali ljude u pokretu imao je fiksnu poziciju.
world-from-eyes.github.io screenshotNakon toga, oni su zumirali odraze očiju ljudi sa fotografija, izolovali ih i napravili matematički proračun o tome gde njihove oči gledaju na dostupnim fotografijama.
Rezultati pokazuju prilično pristojnu rekonstrukciju okoline u kojoj su se ljudi nalazili, naravno u kontrolisanom okruženju. Tim je tako uspeo da prevaziđe značajne prepreke i rekonstruiše čak i neke grube nejasne scene iz fotografija koje je sam napravio.
world-from-eyes.github.io screenshotJedna od njih je i takozvana „inherentna buka“ koju proizvodi rožnjača oka i otežava odvajanje reflektovane svetlosti od složenih struktura očne dužice. Da bi rešili ovaj problem, istraživači su uveli procenu položaja i orijentacije rožnjače i izvukli su karakteristike jedinstvene za očne dužice pojedinaca.
Naposletku, uz pomoć tehnike mašinskog učenja, uspeli su da dodatno izoluju okruženje i poboljšaju reflektovani pejzaž iz odsjaja oka.
Tehnologija ipak i dalje puna prepreka
Uprkos početnom uspehu, kada su probali da modeliraju odraz očiju ljudi iz muzičkih spotova, ono što su dobili bile su samo nejasne mrlje. Za njih su istraživači jedino mogli da pretpostave da predstavljaju LED mrežu i kameru na stativu.
Upravo ovaj primer ilustruje koliko je „očna“ tehnologija u stvari daleko od upotrebe u stvarnom svetu, za razliku, od na primer, elektronske kože koja već može naći svoju širu primenu.
