- See võimaldab kaamera ja Gemini Live'i kaudu reaalajas helikirjeldusi.
- See hõlmab abi mobiilseadme raamimisel ja järelküsimuste esitamisel.
- See on loodud pimedatele või nägemispuudega inimestele ligipääsetavuse tööriistana.
- Nõuab Android 9 või uuemat versiooni ja ei asenda traditsioonilisi liikumisabivahendeid.
Kujutage ette, et saate taskus kaasas kanda kedagi, kes kirjeldab täpselt reaalajas, mis teie ümber toimub. Noh, põhimõtteliselt on see see, mida Google on teinud, integreerides Juhendatud nägemus Gemini Live'isSee funktsionaalsus murrab traditsioonilise küsimuse kirjutamise ja vastuse ootamise dünaamika, võimaldades meil nüüd tehisintellektiga suhelda lihtsalt sellele kaamera objektiivi kaudu maailma näidates.
See tööriist ei ole lihtne staatiline fotoanalüsaator, vaid pigem pakub välja sujuv ja dünaamiline vestlus arvutinägemisel põhinev. Kuigi sellel on tohutu potentsiaal kõigile, kes vajavad abi visuaalsete detailidega, on selle olemus ja raison d'être pimedate inimeste ligipääsetavus või nägemispuudega, püüdes muuta keskkonda täpsete helijuhiste abil palju arusaadavamaks ja hallatavamaks.
Kuidas see tehnoloogia täpselt töötab?
Protsess on üsna lihtne: kasutaja aktiveerib funktsiooni ja jaga kaamerasignaali Gemini Live'iga. Seejärel analüüsib tehisintellekt reaalajas pilti ja kasutaja saab küsida kõike selle kohta, mida ta näeb. Kõige võimsam funktsioon on see, et see võimaldab teil teha järelküsimusedTeisisõnu, kui Gemini tuvastab moosipurgi, saate kohe küsida selle aegumiskuupäeva või koostisosi ilma päringut uuesti alustamata.
Erinevalt teistest tööriistadest on juhitav nägemine võimeline suunake mobiiltelefoni raamimistKui seade on suunatud liiga kõrgele, objektile liiga lähedale või veidi keskpunktist väljas, annab assistent teile suulisi juhiseid selle parandamiseks. telefoni asendit reguleeridaSee tagab, et tehisintellektil on vajalik visuaalne teave, et vältida kirjelduses vigu.
Praktilised tööriistad igapäevaeluks
Rakendused on uskumatult mitmekesised ja puudutavad väga igapäevaseid teemasid, mida me vahel keeruliseks peame. Näiteks on see ideaalne loe väiketähti toitumisalaste etikettidel või ravimi infolehtedel, kus see pole kergesti nähtav. See on väga kasulik ka kadunud esemete leidmineNäiteks võid telefoni toas ringi liigutada ja paluda sellel märku anda, kui see tuvastab põrandale kukkunud kõrvaklapid või purke täis köögis oleva piprapurgi.
Lisaks süveneb tööriist subjektiivsemasse ja esteetilisemasse valdkonda. Juhendatud Nägemine suudab ära tunda mustrid, kujundid ja värvidSeega võid temalt küsida, kas triibuline särk sobib konkreetsete pükstega, või lihtsalt uurida, mis värvi rõivas on. Ta saab isegi teha... viibimise üldine kirjeldus teadmata või detailselt kirjeldatakse, millised asjad laual asuvad.
Androidi konfiguratsioon ja ühilduvus
Alustamiseks on kõige otsesem viis avada Gemini rakendus, minna profiili seadetesse ja vali juhendatud nägemise kasutamise suvand otseülekanne. Kui see on tehtud, avage lihtsalt Gemini Live ja jagage kaamerat. Neile, kes otsivad suuremat kiirust, on Google lisanud võimaluse luua otsejuurdepääs ligipääsetavuse menüüst (Visuaalne abi), mis võimaldab seda aktiveerida kahe sõrme žestide, hõljuva nupu või mõlema helitugevuse nupu samaaegse vajutamise abil.
Mis puutub tehnilistesse nõuetesse, siis funktsioon töötab sujuvalt seadmetes, millel on Android 9 või uuemad versioonideeldusel, et Gemini Live on kasutaja keeles ja piirkonnas saadaval. Oluline on nii operatsioonisüsteemi kui ka Gemini rakenduse olemasolu. värskendatud uusimale versioonileLisaks on see täielikult integreeritud Google TalkBack nägemispuudega kasutajate autonoomia maksimeerimiseks.
Arendusprotsess ja ohutushoiatused
See edu ei ole juhuse, vaid tiheda koostöö tulemus. Aira, visuaalse interpretatsiooni eksperdidSüsteemi tõelise usaldusväärsuse tagamiseks kasutati tuhandeid tunde reaalse maailma andmeid ja enam kui 1.000 testijat usaldusväärsete testijate võrgustikusttagades, et tehisintellekt mõistab, millist teavet inimene igapäevases olukorras tegelikult vajab.
Siiski on üks punkt, kus Google on veendunud: see tööriist see ei ole meditsiiniseade ega turvasüsteemi. Ettevõte hoiatab, et Guided Vision võib vigu teha ja seetõttu Seda ei tohiks navigeerimiseks kasutada. tänaval, tuvastada teel takistusi või asendada juhtkoera või kepi funktsiooni. Selle eesmärk on täiendav visuaalne abimitte ohutu liikumise juhend.
See reaalajas nägemise integreerimine tähistab paradigma muutust, kus me ei kohandu enam telefoni liidesega, vaid tehisintellekt kohandub meie keskkonnaga. Kombineerides täiustatud visuaalse tuvastamise loomuliku häälega liidesega, muudab Google mobiiltelefoni... intelligentne kaaslane võimeline lugema, tuvastama ja kasutajat igapäevastes olukordades juhendama.