- Fitur ini memungkinkan deskripsi audio secara real-time melalui kamera dan Gemini Live.
- Ini termasuk bantuan dalam membingkai perangkat seluler dan mengajukan pertanyaan lanjutan.
- Ini dirancang sebagai alat bantu aksesibilitas bagi penyandang tunanetra atau gangguan penglihatan.
- Membutuhkan Android 9 atau lebih tinggi dan tidak menggantikan alat bantu mobilitas tradisional.
Bayangkan Anda bisa membawa seseorang di saku Anda yang menjelaskan secara tepat apa yang terjadi di sekitar Anda secara real-time. Nah, pada dasarnya itulah yang telah dilakukan Google dengan mengintegrasikan Visi Terarah di dalam Gemini LiveFungsi ini mematahkan dinamika tradisional dalam menulis pertanyaan dan menunggu jawaban, kini memungkinkan kita untuk berinteraksi dengan kecerdasan buatan hanya dengan menunjukkan dunia kepadanya melalui lensa kamera.
Alat ini bukan sekadar penganalisis foto statis sederhana, melainkan menawarkan sebuah pendekatan. percakapan yang lancar dan dinamis berdasarkan visi komputer. Meskipun memiliki potensi yang sangat besar bagi siapa pun yang membutuhkan bantuan dengan detail visual, inti dan alasan keberadaannya adalah... aksesibilitas bagi penyandang tunanetra atau bagi mereka yang memiliki penglihatan terbatas, berupaya membuat lingkungan menjadi jauh lebih mudah dipahami dan dikelola melalui instruksi audio yang tepat.
Bagaimana sebenarnya teknologi ini bekerja?
Prosesnya cukup sederhana: pengguna mengaktifkan fungsi tersebut dan berbagi sinyal kamera dengan Gemini Live. Dari situ, AI menganalisis gambar langsung, dan pengguna dapat menanyakan apa saja tentang apa yang mereka lihat. Fitur yang paling ampuh adalah memungkinkan Anda untuk melakukan hal-hal berikut: pertanyaan lanjutanDengan kata lain, jika Gemini mengidentifikasi sekaleng selai, Anda dapat langsung menanyakan tanggal kedaluwarsanya atau bahan-bahan apa yang terkandung di dalamnya tanpa harus memulai pertanyaan dari awal.
Berbeda dengan alat lainnya, Guided Vision mampu melakukan hal-hal berikut: memandu pembingkaian ponselJika perangkat mengarah terlalu tinggi, terlalu dekat dengan objek, atau sedikit melenceng dari tengah, asisten akan memberikan petunjuk verbal untuk memperbaikinya. sesuaikan posisi teleponHal ini memastikan bahwa AI memiliki informasi visual yang diperlukan untuk menghindari kesalahan dalam deskripsi.
Alat praktis untuk kehidupan sehari-hari
Aplikasi-aplikasinya sangat beragam dan menyentuh masalah-masalah sehari-hari yang terkadang kita anggap menantang. Misalnya, ini sangat ideal untuk membaca huruf kecil pada label nutrisi atau brosur obat di tempat yang tidak mudah terlihat. Ini juga sangat berguna untuk menemukan benda yang hilangAnda dapat menggerakkan ponsel di sekitar ruangan dan memintanya untuk memberi peringatan saat mendeteksi, misalnya, earphone yang jatuh ke lantai atau tempat merica di dapur yang penuh dengan stoples.
Selain itu, alat ini menyelami wilayah yang lebih subjektif dan estetis. Guided Vision dapat mengenali pola, bentuk, dan warnaJadi, Anda bisa bertanya padanya apakah kemeja bergaris cocok dengan celana tertentu atau sekadar mencari tahu warna pakaian tersebut. Dia bahkan bisa melakukan hal itu. deskripsi umum tentang masa inap Tidak diketahui atau tidak dijelaskan secara detail benda apa saja yang ada di atas meja.
Konfigurasi dan kompatibilitas Android
Untuk memulai, cara paling mudah adalah dengan membuka aplikasi Gemini, masuk ke pengaturan profil, dan pilih opsi untuk menggunakan panduan penglihatan Langsung. Setelah selesai, cukup buka Gemini Live dan bagikan kamera. Bagi yang menginginkan kecepatan lebih, Google menyertakan opsi untuk membuat akses langsung dari menu Aksesibilitas (Bantuan visual), memungkinkan pengaktifannya dengan gerakan dua jari, tombol mengambang, atau dengan menekan kedua tombol volume secara bersamaan.
Adapun persyaratan teknis, fitur ini berjalan lancar pada perangkat dengan Android 9 atau versi yang lebih barudengan syarat Gemini Live tersedia dalam bahasa dan wilayah pengguna. Penting untuk memiliki sistem operasi dan aplikasi Gemini. diperbarui ke versi terbaruSelain itu, sistem ini telah terintegrasi sepenuhnya dengan Google TalkBack untuk memaksimalkan otonomi pengguna dengan gangguan penglihatan.
Proses pengembangan dan peringatan keselamatan
Kemajuan ini bukanlah hasil kebetulan, melainkan hasil kolaborasi erat dengan Aira, ahli dalam interpretasi visualUntuk memastikan sistem benar-benar andal, ribuan jam data dunia nyata dan dukungan dari lebih dari 1.000 penguji dari jaringan Trusted TesterMemastikan bahwa AI memahami informasi apa yang benar-benar dibutuhkan seseorang dalam situasi sehari-hari.
Namun, ada satu hal yang Google tegaskan: alat ini itu bukan alat medis juga bukan sistem keamanan. Perusahaan memperingatkan bahwa Guided Vision dapat melakukan kesalahan dan, oleh karena itu, Ini tidak boleh digunakan untuk navigasi. Di jalan, mendeteksi rintangan di jalan, atau menggantikan fungsi anjing penuntun atau tongkat. Tujuannya adalah untuk... bantuan visual tambahanbukan panduan mobilitas yang aman.
Integrasi visi waktu nyata ini menandai pergeseran paradigma di mana kita tidak lagi beradaptasi dengan antarmuka ponsel, melainkan AI yang beradaptasi dengan lingkungan kita. Dengan menggabungkan pengenalan visual canggih dengan antarmuka suara alami, Google mengubah ponsel menjadi sebuah pendamping yang cerdas mampu membaca, mengidentifikasi, dan membimbing pengguna dalam situasi sehari-hari apa pun.