Google potvrđuje: Magic Pointer dolazi i u Gemini u Chromeu

Google je potvrdio da Magic Pointer, novo AI iskustvo pokazivača koje je prvi put prikazao za svoje novopredstavljene Googlebook prijenosnike, neće ostati ograničeno samo na taj hardver. Ista funkcija stiže i u Gemini u Chromeu, gdje bi korisnici trebali moći koristiti pokazivač kao način za traženje pomoći od umjetne inteligencije na dijelu stranice koji ih zanima.

U objavi na blogu istraživači iz Google DeepMinda opisali su ideje i načela interakcije iza Magic Pointera. DeepMind navodi da se pokazivač miša „jedva razvijao više od pola stoljeća” te da Google sada želi to promijeniti uz pomoć kontekstualnog razumijevanja temeljenog na Gemini modelima. Cilj je, kako kažu, stvoriti „intuitivnu umjetnu inteligenciju koja se susreće s korisnicima across all the tools they use, without interrupting their flow”.

Umjesto kopiranja teksta u Gemini ili pisanja dugih upita, korisnici Chromea mogli bi jednostavno pokazati na sadržaj na zaslonu i zatražiti pomoć. Google navodi da sustav može razumjeti i ono na što pokazujete i ono što želite učiniti s tim sadržajem. DeepMind je pritom naveo primjer u kojem se može odabrati nekoliko proizvoda na stranici i tražiti usporedbu, ili pokazati mjesto na kojem se želi vizualizirati novi kauč u dnevnoj sobi.

Google opisuje Magic Pointer kao iskustvo u kojem korisnik može „samo pokazati, a umjetna inteligencija točno zna koja riječ, odlomak, dio slike ili blok koda zahtijeva pomoć”. Tvrtka dodaje i da želi da interakcije s AI-jem budu prirodnije i razgovornije, pa bi korisnici umjesto detaljnih promptova mogli davati kratke zahtjeve poput „Ispravi ovo”, „Premjesti to ovdje” ili „Što ovo znači?”, uz oslanjanje na geste i zajednički kontekst.

Jedna od ideja koju Google ističe jest pretvaranje „piksela u djelatne entitete”. Prema opisu tvrtke, Gemini može prepoznati objekte, datume, mjesta i drugi sadržaj izravno sa zaslona, što bi moglo omogućiti izravniju interakciju sa stvarima poput popisa restorana u videozapisima, rukom pisanih bilješki ili putnih odredišta.

Google pritom navodi da će naprednije mogućnosti Magic Pointera vjerojatno ostati u nadolazećim Googlebook prijenosnicima, dok bi Chromeova verzija mogla nuditi osnovnije funkcije poput usporedbe i vizualizacije. Tvrtka nije rekla koje će regije ili korisnici prvi dobiti pristup Magic Pointeru u Gemini u Chromeu. Android Authority navodi i da je vlastitim provjerama u Gemini u Chromeu nije uspio pristupiti nijednoj funkciji Magic Pointera, pa bi uvođenje moglo biti ograničeno ili postupno.