Google Gemini sada može da “vidi” vaš ekran i kameru u realnom vremenu

Google je počeo sa postepenim uvođenjem naprednih AI funkcija za Gemini Live, koje korisnicima omogućavaju da postavljaju pitanja zasnovana na sadržaju ekrana ili uživo kamere telefona. Kako je potvrdio Google-ov portparol Aleks Džozef za The Verge, ova funkcionalnost je deo rada na Project Astra, čija demonstracija je prvi put prikazana pre gotovo godinu dana.

Gemini dobija vid: ekran i kamera kao nova osnova za interakciju

Na Redditu se pojavio video jednog korisnika Xiaomi telefona koji prikazuje Gemini kako čita informacije direktno sa ekrana i odgovara na pitanja u vezi sa prikazanim sadržajem. Ova funkcija, kao i mogućnost interpretacije kamere uživo, dostupna je pretplatnicima na Google One AI Premium plan, u okviru Gemini Advanced verzije.

U zvaničnom demonstracionom videu Google prikazuje korisnika koji koristi kameru da bi pitao Geminija koju boju da izabere za glaziranu keramiku, a asistent u realnom vremenu analizira vizuelne podatke i daje sugestije.

Konkurencija zaostaje – Astra funkcije već stižu korisnicima

Dok Amazon tek priprema ograničeno lansiranje svog unapređenog Alexa Plus asistenta, a Apple odlaže novu verziju Siri, Google-ov Gemini već demonstrira funkcionalnosti sledeće generacije digitalnih asistenata. Iako Samsung i dalje forsira Bixby, Gemini je već podrazumevani asistent na Galaxy telefonima, što dodatno proširuje njegovu prisutnost.

Ove nove mogućnosti predstavljaju veliki korak ka interaktivnijem i kontekstualno svesnijem AI iskustvu. Umesto klasičnih tekstualnih unosa, sada možete pokazati sadržaj ekrana ili kameru i dobijati odgovore u trenutku – bilo da je u pitanju objašnjenje dokumenta, prevod etikete, identifikacija predmeta ili vizuelna analiza.

Google je najavio da će nastaviti da širi Astra funkcionalnosti u narednim mesecima, uključujući bolje razumevanje zvuka, pokreta i fizičkog konteksta, što bi moglo omogućiti još veću integraciju AI asistenta u svakodnevne aktivnosti.

Za sada, korisnici Gemini Advanced plana već imaju priliku da isprobaju budućnost digitalnih asistenata – i ona doslovno “gleda” ono što vi gledate, prenosi The Verge.