Meta naočare čitaju i prevode umesto vas

U Americi i Kanadi, Rej-Ban Meta pametne naočare su dobile uvođenje multimodalne AI tehnologije sa softverom pod nazivom „Meta AI virtuelni asistent”. Sa multimodalnom veštačkom inteligencijom — što znači generativnu veštačku inteligenciju koja može da obrađuje upite koji uključuju više od jednog medija — uređaj može bolje da odgovori na upite na osnovu onoga što korisnik gleda.

„Recimo da putujete i pokušavate da pročitate meni na francuskom. Vaše pametne naočare mogu da koriste ugrađenu kameru i Meta AI da prevedu tekst umesto vas, dajući informacije koje su potrebne bez potrebe da vadite telefon ili buljite na ekranu”, objasnili su predstavnici Mete, a piše Live Science.

Uređaj prvo fotografiše ono što korisnik gleda, a zatim AI koristi obradu zasnovanu na oblaku da bi pružila odgovor na upit, isporučen govorom, kao što je „koju vrstu biljke gledam?“

Meta je prvi put istražio integraciju multimodalne veštačke inteligencije u Rej-Ban Meta pametnim naočarima u ograničenom izdanju u decembru 2023. godine. Testirajući utvrđeno je da naočare mogu da opišu vrstu mačke, na primer, i njene karakteristike na slici snimljenoj kamerom. Ali veštačka inteligencija je naišla na probleme da tačno identifikuje vrste biljaka koje pripadaju i borila se da ispravno identifikuje mrmota u dvorištu svog suseda. Da razjasnimo, virtuelni asistenti sa veštačkom inteligencijom nisu ništa novo, to su već postojeći asistenti koje koristimo i koji svi pružaju pametne odgovore na upite na prirodnom jeziku. Ali, suština Meta AI u Rej-Ban pametnim naočarima je njegova multimodalna funkcionalnost - sposobnost spajanja i obrade podataka sa više senzorskih modula. 

Obučeni da identifikuju obrasce u različitim tipovima unosa podataka kroz više neutralnih mreža — kolekcije algoritama za mašinsko učenje raspoređenih da oponašaju ljudski mozak — multimodalni AI mogu da obrađuju ulazne podatke iz teksta, slika, zvuka i još mnogo toga. U pametnim naočarima, to znači da veštačka inteligencija može da shvati svet koji nosilac posmatra kombinovanjem senzora na naočarima sa ovim neuronskim mrežama. Kao rezultat, sistem može odgovoriti na sofisticiranije upite i ponuditi pametnije kontekstualne informacije, piše Live Science.

Ali, u slučaju Rej-Ban Meta uređaja, AI mora da pređe izvesnu udaljenost pre nego što se susretne sa mogućnostima AI obrade koje se nalaze u najnovijim pametnim telefonima; ovi imaju koristi od snažnijih čipsetova i fuzije ugrađenih senzora – gde se podaci uzimaju sa više senzora i obrađuju zajedno, na primer da bi se ponudilo prepoznavanje scene u aplikacijama kamere, omogućavajući inteligentno podešavanje osvetljenja i balansa boja, ili kombinovanje podataka sa termometara i optičkih senzora u pametnim satovima kako bi pružili bolje povratne informacije o svom vežbanju.