- Tai leidžia realiuoju laiku teikti garso aprašymus per kamerą ir „Gemini Live“.
- Tai apima pagalbą įrėminant mobilųjį įrenginį ir užduodant tolesnius klausimus.
- Jis sukurtas kaip prieinamumo priemonė akliesiems arba silpnaregiams.
- Reikalinga „Android 9“ arba naujesnė versija ir nepakeičia tradicinių judėjimo priemonių.
Įsivaizduokite, kad galite kišenėje nešiotis asmenį, kuris realiuoju laiku gali tiksliai apibūdinti, kas vyksta aplink jus. Na, iš esmės tai „Google“ ir padarė integruodama „Guired Vision“ į „Geni Live“ – funkciją, kuri laužo tradicinę klausimo įvedimo ir atsakymo laukimo dinamiką, dabar leisdama mums sąveikauti su dirbtiniu intelektu tiesiog parodant jam pasaulį per kameros objektyvą.
Šis įrankis nėra tiesiog statinis nuotraukų analizatorius; jis siūlo sklandų ir dinamišką pokalbį, pagrįstą kompiuterine rega. Nors jis turi milžinišką potencialą visiems, kuriems reikia pagalbos su vaizdinėmis detalėmis, jo pagrindinė paskirtis – prieinamumas akliesiems ar silpnaregiams , siekiant, kad aplinka būtų daug suprantamesnė ir valdomesnė, pateikiant tikslias garso instrukcijas.
Kaip tiksliai veikia ši technologija?
Procesas gana paprastas: vartotojas aktyvuoja funkciją ir bendrina kameros signalą su „Gemini Live“. Tada dirbtinis intelektas analizuoja tiesioginį vaizdą, o vartotojas gali paklausti bet ko apie tai, ką mato. Galingiausia funkcija yra ta, kad ji leidžia užduoti tolesnius klausimus ; tai yra, jei „Gemini“ atpažįsta uogienės stiklainį, galite iš karto paklausti apie galiojimo datą ar ingredientus, nereikėdami iš naujo paleisti užklausos.
Skirtingai nuo kitų įrankių, „Guided Vision“ gali padėti kadruoti telefoną . Jei įrenginys nukreiptas per aukštai, per arti objekto arba šiek tiek ne centre, asistentas duos jums žodinius nurodymus, kad pakoreguotumėte telefono padėtį . Tai užtikrina, kad dirbtinis intelektas turėtų reikiamą vaizdinę informaciją, kad būtų išvengta klaidų aprašyme.
Praktiniai įrankiai kasdieniam gyvenimui
Programėlės yra neįtikėtinai įvairios ir skirtos kasdienėms situacijoms, kurios kartais gali būti sudėtingos. Pavyzdžiui, jos idealiai tinka norint perskaityti smulkiu šriftu pažymėtas maistingumo etiketes ar vaistų lapelius ten, kur akys nemato. Jos taip pat labai naudingos ieškant pamestų daiktų ; galite judinti telefoną po kambarį ir paprašyti, kad jis jus įspėtų, kai aptinka, pavyzdžiui, ant grindų nukritusią ausinę ar pipirinę virtuvėje, pilnoje stiklainių.
Be to, įrankis gilinasi į subjektyvesnes ir estetines sritis. „Guided Vision“ gali atpažinti raštus, formas ir spalvas , todėl galite paklausti, ar dryžuoti marškiniai dera su konkrečiomis kelnėmis, arba tiesiog sužinoti, kokios spalvos yra drabužis. Jis netgi gali pateikti bendrą nepažįstamo kambario aprašymą arba atpažinti daiktus ant stalo.
„Android“ konfigūracija ir suderinamumas
Norėdami pradėti, tiesiausias būdas yra atidaryti „Gemini“ programėlę, eiti į profilio nustatymus ir įjungti parinktį „Live Guided Vision“ naudojimas. Tai padarę, tiesiog atidarykite „Gemini Live“ ir bendrinkite kameros vaizdą. Tiems, kurie nori dar greitesnės prieigos, „Google“ įtraukė parinktį sukurti nuorodą iš pritaikymo neįgaliesiems (regėjimas) meniu, leidžiančią ją suaktyvinti dviejų pirštų gestais, plaukiojančiu mygtuku arba vienu metu paspaudus abu garsumo mygtukus.
Kalbant apie techninius reikalavimus, funkcija sklandžiai veikia įrenginiuose su „Android 9“ ar naujesne versija , jei „Gemini Live“ pasiekiama naudotojo kalba ir regione. Būtina atnaujinti ir operacinę sistemą, ir „Gemini“ programėlę į naujausią versiją . Be to, ji yra visiškai integruota su „Google TalkBack“ , kad būtų užtikrintas maksimalus naudotojų su regos negalia savarankiškumas.
Kūrimo procesas ir saugos įspėjimai
Šis proveržis nebuvo atsitiktinumas, o glaudaus bendradarbiavimo su vizualinės interpretacijos eksperte Aira rezultatas . Siekiant užtikrinti sistemos patikimumą, buvo panaudota tūkstančiai valandų realaus pasaulio duomenų, o prie šios sistemos prisijungė daugiau nei 1.000 testuotojų iš „Trusted Tester“ tinklo , taip užtikrinant, kad dirbtinis intelektas suprastų, kokios informacijos žmogui iš tikrųjų reikia kasdienėje situacijoje.
Tačiau „Google“ tvirtai laikosi nuomonės: ši priemonė nėra nei medicinos prietaisas, nei saugos sistema. Bendrovė perspėja, kad „Guided Vision“ gali suklysti, todėl jos negalima naudoti navigacijai gatvėse, kliūčių aptikimui kelyje ar vedlio šuns ar lazdos funkcijai pakeisti. Jos paskirtis – papildoma vizualinė pagalba , o ne saugaus judėjimo gairės.
Ši realaus laiko regėjimo integracija žymi paradigmos pokytį, kai mes nebeprisitaikome prie telefono sąsajos, o dirbtinis intelektas prisitaiko prie mūsų aplinkos. Derindama pažangų vaizdo atpažinimą su natūralia balso sąsaja, „Google“ paverčia mobilųjį telefoną išmaniu palydovu, galinčiu skaityti, identifikuoti ir padėti vartotojui bet kurioje kasdienėje situacijoje.