- Ia membolehkan penerangan audio masa nyata melalui kamera dan Gemini Live.
- Ia termasuk bantuan dengan membingkaikan peranti mudah alih dan menanyakan soalan susulan.
- Ia direka bentuk sebagai alat aksesibiliti untuk orang buta atau cacat penglihatan.
- Memerlukan Android 9 atau lebih tinggi dan tidak menggantikan alat bantuan mobiliti tradisional.
Bayangkan anda boleh membawa seseorang di dalam poket anda yang boleh menerangkan dengan tepat apa yang berlaku di sekeliling anda dalam masa nyata. Itulah yang telah dilakukan oleh Google dengan mengintegrasikan Guided Vision ke dalam Gemini Live , satu ciri yang memecah dinamik tradisional menaip soalan dan menunggu jawapan, kini membolehkan kita berinteraksi dengan kecerdasan buatan hanya dengan menunjukkannya kepada dunia melalui kanta kamera.
Alat ini bukan sekadar penganalisis foto statik; ia menawarkan perbualan yang lancar dan dinamik berdasarkan penglihatan komputer. Walaupun ia mempunyai potensi yang sangat besar untuk sesiapa sahaja yang memerlukan bantuan dengan perincian visual, tujuan utamanya adalah untuk memudahkan akses kepada individu buta atau cacat penglihatan , bertujuan untuk menjadikan persekitaran lebih mudah difahami dan diurus melalui arahan audio yang tepat.
Bagaimanakah sebenarnya teknologi ini berfungsi?
Prosesnya agak mudah: pengguna mengaktifkan ciri tersebut dan berkongsi isyarat kamera dengan Gemini Live. Dari situ, AI menganalisis imej langsung dan pengguna boleh bertanya apa sahaja tentang apa yang mereka lihat. Ciri yang paling hebat ialah ia membenarkan soalan susulan ; iaitu, jika Gemini mengenal pasti balang makanan yang diawet, anda boleh terus bertanya tentang tarikh luput atau bahan-bahannya tanpa perlu memulakan semula pertanyaan.
Tidak seperti alat lain, Guided Vision boleh membimbing pembingkaian telefon . Jika peranti menghala terlalu tinggi, terlalu dekat dengan objek atau sedikit tersasar dari tengah, pembantu akan memberi anda isyarat lisan untuk melaraskan kedudukan telefon . Ini memastikan AI mempunyai maklumat visual yang diperlukan untuk mengelakkan ralat dalam penerangannya.
Alat praktikal untuk kehidupan seharian
Aplikasinya sangat pelbagai dan menangani situasi harian yang kadangkala mencabar. Contohnya, ia sesuai untuk membaca cetakan kecil pada label nutrisi atau risalah ubat di tempat yang mata anda tidak dapat lihat. Ia juga sangat berguna untuk mencari objek yang hilang ; anda boleh menggerakkan telefon anda di sekeliling bilik dan memintanya untuk memberi amaran kepada anda apabila ia mengesan, contohnya, fon telinga yang jatuh di atas lantai atau penggoncang lada di dapur yang penuh dengan balang.
Tambahan pula, alat ini menyelidiki alam yang lebih subjektif dan estetik. Visi Berpandu boleh mengenali corak, bentuk dan warna , jadi anda boleh bertanya sama ada baju berjalur sesuai dengan seluar tertentu atau sekadar mengetahui warna pakaian. Ia juga boleh memberikan penerangan umum tentang bilik yang tidak dikenali atau mengenal pasti barang-barang di atas meja.
Konfigurasi dan keserasian Android
Untuk bermula, cara paling langsung adalah dengan membuka aplikasi Gemini, pergi ke tetapan profil anda dan aktifkan pilihan untuk menggunakan Live Guided Vision. Setelah anda melakukan ini, buka Gemini Live dan kongsikan suapan kamera anda. Bagi mereka yang mencari akses yang lebih pantas, Google telah memasukkan pilihan untuk mencipta pintasan daripada menu Kebolehcapaian (Vision), yang membolehkan anda mengaktifkannya dengan gerak isyarat dua jari, butang terapung atau dengan menekan kedua-dua butang kelantangan secara serentak.
Berkenaan keperluan teknikal, ciri ini berjalan lancar pada peranti dengan Android 9 atau lebih baharu , dengan syarat Gemini Live tersedia dalam bahasa dan rantau pengguna. Adalah penting untuk kedua-dua sistem pengendalian dan aplikasi Gemini dikemas kini kepada versi terkini . Tambahan pula, ia disepadukan sepenuhnya dengan Google TalkBack untuk memaksimumkan kebebasan bagi pengguna yang mengalami masalah penglihatan.
Proses pembangunan dan amaran keselamatan
Penemuan ini bukanlah satu kebetulan, tetapi hasil kerjasama rapat dengan Aira, pakar dalam interpretasi visual . Bagi memastikan kebolehpercayaan sistem, beribu-ribu jam data dunia sebenar telah digunakan, berserta sokongan lebih 1.000 penguji daripada rangkaian Penguji Dipercayai , yang menjamin bahawa AI memahami maklumat yang benar-benar diperlukan oleh seseorang dalam situasi seharian.
Walau bagaimanapun, terdapat satu perkara yang Google tegaskan: alat ini bukanlah peranti perubatan mahupun sistem keselamatan. Syarikat itu memberi amaran bahawa Guided Vision boleh melakukan kesilapan dan, oleh itu, tidak boleh digunakan untuk menavigasi jalan, mengesan halangan di laluan atau menggantikan fungsi anjing pemandu atau tongkat. Tujuannya adalah bantuan visual pelengkap , bukan panduan mobiliti yang selamat.
Integrasi penglihatan masa nyata ini menandakan anjakan paradigma di mana kita tidak lagi menyesuaikan diri dengan antara muka telefon, tetapi sebaliknya AI menyesuaikan diri dengan persekitaran kita. Dengan menggabungkan pengecaman visual lanjutan dengan antara muka suara semula jadi, Google mengubah telefon bimbit menjadi teman pintar yang mampu membaca, mengenal pasti dan membimbing pengguna dalam apa jua situasi seharian.