Išsamus vadovas, kaip veikia „Google Guided Vision“

Paskutiniai pakeitimai: spalio 14 d. 2026 m.
  • Tai leidžia realiuoju laiku teikti garso aprašymus per kamerą ir „Gemini Live“.
  • Tai apima pagalbą įrėminant mobilųjį įrenginį ir užduodant tolesnius klausimus.
  • Jis sukurtas kaip prieinamumo priemonė akliesiems arba silpnaregiams.
  • Reikalinga „Android 9“ arba naujesnė versija ir nepakeičia tradicinių judėjimo priemonių.

Vyras su akiniais nuo saulės patalpoje naudoja balso komandas savo išmaniajame telefone.

Įsivaizduokite, kad galite kišenėje nešiotis asmenį, kuris realiuoju laiku tiksliai aprašo, kas vyksta aplink jus. Na, iš esmės tai „Google“ ir padarė integruodama Vedanti vizija Dvynių gyvenimeŠi funkcija laužo tradicinę klausimo rašymo ir atsakymo laukimo dinamiką ir dabar leidžia mums sąveikauti su dirbtiniu intelektu tiesiog parodant jam pasaulį per kameros objektyvą.

Šis įrankis nėra paprastas statinis nuotraukų analizatorius, o veikiau siūlo sklandus ir dinamiškas pokalbis pagrįstas kompiuterine rega. Nors jis turi milžinišką potencialą visiems, kuriems reikia pagalbos su vaizdinėmis detalėmis, jo esmė ir raison d'être yra prieinamumas akliesiems arba su ribotu regėjimu, siekiant, kad aplinka būtų daug suprantamesnė ir valdomesnė, naudojant tikslias garso instrukcijas.

Kaip tiksliai veikia ši technologija?

Moteris su balta lazda ir ausinėmis, naudodama savo išmanųjį telefoną, vesdama save gamtos taku.

Procesas gana paprastas: vartotojas aktyvuoja funkciją ir bendrinti kameros signalą su „Gemini Live“. Tada dirbtinis intelektas analizuoja tiesioginį vaizdą, o vartotojas gali paklausti bet ko apie tai, ką mato. Galingiausia funkcija yra ta, kad ji leidžia jums atlikti tolesni klausimaiKitaip tariant, jei „Gemini“ atpažįsta konservų skardinę, galite iš karto paklausti, kokia galiojimo data ar kokie ingredientai joje yra, nereikėdami iš naujo paleisti užklausos.

  „DreamStudio“: kas tai yra ir kaip kurti vaizdus naudojant dirbtinį intelektą

Skirtingai nuo kitų įrankių, „Guided Vision“ gali vadovauti mobiliojo telefono kadravimuiJei prietaisas nukreiptas per aukštai, per arti objekto arba šiek tiek ne centre, asistentas balsu paragins tai ištaisyti. pakoreguoti telefono padėtįTai užtikrina, kad dirbtinis intelektas turėtų reikiamą vaizdinę informaciją, kad būtų išvengta klaidų aprašyme.

Praktiniai įrankiai kasdieniam gyvenimui

Moteris drabužių parduotuvėje mobiliojo telefono kamera analizuoja marškinių spalvą ir raštą.

Programos yra neįtikėtinai įvairios ir paliečia labai kasdienes problemas, kurios kartais mums atrodo sudėtingos. Pavyzdžiui, tai idealiai tinka skaityti mažąsias raides maistingumo etiketėse ar vaistų lapeliuose, kur tai nėra lengvai matoma. Tai taip pat labai naudinga surasti pamestus daiktusGalite judinti telefoną po kambarį ir nurodyti, kad jis jus įspėtų, kai, pavyzdžiui, aptinka ant grindų nukritusias ausines arba pipirinę virtuvėje, pilnoje stiklainių.

Be to, įrankis pasineria į subjektyvesnę ir estetiškesnę teritoriją. „Guided Vision“ gali atpažinti raštai, formos ir spalvosTaigi, galite jos paklausti, ar dryžuoti marškiniai dera su konkrečiomis kelnėmis, arba tiesiog sužinoti, kokios spalvos yra drabužis. Ji netgi gali padaryti bendras viešnagės aprašymas nežinoma arba išsamiai aprašyta, kokie daiktai guli ant stalo.

„Android“ konfigūracija ir suderinamumas

Išmaniojo telefono stambus planas, nuskaitantis ir didinantis smulkų tekstą produkto maistingumo etiketėje.

Norėdami pradėti, tiesiausias būdas yra atidaryti „Gemini“ programėlę, eiti į profilio nustatymus ir pasirinkite parinktį naudoti valdomą matymą tiesiogiai. Tai padarę, tiesiog atidarykite „Gemini Live“ ir bendrinkite kamerą. Tiems, kurie nori didesnio greičio, „Google“ įtraukė parinktį sukurti tiesioginė prieiga iš prieinamumo meniu (Vizualinė pagalba), leidžianti ją aktyvuoti dviejų pirštų gestais, plaukiojančiu mygtuku arba vienu metu paspaudus abu garsumo mygtukus.

  Kaip analizuoti PDF failus naudojant vietinį ir debesies dirbtinį intelektą

Kalbant apie techninius reikalavimus, funkcija sklandžiai veikia įrenginiuose su „Android 9“ arba naujesnės versijossu sąlyga, kad „Gemini Live“ pasiekiama naudotojo kalba ir regione. Būtina turėti ir operacinę sistemą, ir „Gemini“ programėlę. atnaujinta į naujausią versijąBe to, jis buvo visiškai integruotas su "Google TalkBack" siekiant maksimaliai padidinti regėjimo negalią turinčių vartotojų autonomiją.

Kūrimo procesas ir saugos įspėjimai

Išmanusis telefonas aptinka pamestą daiktą (raktus) po sofa naudodamas skaitmeninį vaizdinį atpažinimo laukelį.

Ši pažanga pasiekta ne atsitiktinumo, o glaudaus bendradarbiavimo su Aira, vizualinės interpretacijos ekspertėSiekiant užtikrinti sistemos patikimumą, buvo panaudota tūkstančiai valandų realaus pasaulio duomenų ir daugiau nei 1.000 testuotojų iš patikimų testuotojų tinkloužtikrinant, kad dirbtinis intelektas suprastų, kokios informacijos žmogui iš tikrųjų reikia kasdienėje situacijoje.

Tačiau yra vienas dalykas, kuriame „Google“ yra nepalenkiama: šis įrankis tai nėra medicinos prietaisas nei apsaugos sistemos. Bendrovė įspėja, kad „Guided Vision“ gali suklysti ir todėl Jis neturėtų būti naudojamas navigacijai. gatvėje aptikti kliūtis kelyje arba pakeisti šuns vedlio ar lazdos funkciją. Jo paskirtis – papildoma vizualinė pagalbane saugaus judėjimo vadovas.

Ši realaus laiko matymo integracija žymi paradigmos pokytį, kai mes nebeprisitaikome prie telefono sąsajos, o dirbtinis intelektas prisitaiko prie mūsų aplinkos. Derindama pažangų vaizdo atpažinimą su natūralia balso sąsaja, „Google“ mobilųjį telefoną paverčia... protingas kompanionas gebantis skaityti, atpažinti ir padėti vartotojui bet kokioje kasdienėje situacijoje.