- זה מאפשר תיאורי שמע בזמן אמת דרך המצלמה ו-Gemini Live.
- זה כולל סיוע במסגור המכשיר הנייד ושאלת שאלות המשך.
- הוא נועד ככלי נגישות עבור עיוורים או לקויי ראייה.
- דורש אנדרואיד 9 ומעלה ואינו מחליף עזרי ניידות מסורתיים.
דמיינו שאתם יכולים לשאת מישהו בכיס שלכם שמתאר בדיוק מה קורה סביבכם בזמן אמת. ובכן, זה בעצם מה שגוגל עשתה על ידי שילוב ראייה מודרכת בתוך ג'מיני לייבפונקציונליות זו שוברת את הדינמיקה המסורתית של כתיבת שאלה והמתנה לתשובה, וכעת מאפשרת לנו לתקשר עם בינה מלאכותית פשוט על ידי הצגת העולם דרך עדשת המצלמה.
כלי זה אינו מנתח תמונות סטטי פשוט, אלא מציע שיחה זורמת ודינמית מבוסס על ראייה ממוחשבת. למרות שיש לו פוטנציאל עצום לכל מי שצריך עזרה עם פרטים חזותיים, ליבו וסיבת קיומו הוא ה... נגישות לאנשים עיוורים או עם ראייה מופחתת, המבקשים להפוך את הסביבה למובנת וניתנת לניהול הרבה יותר באמצעות הוראות קוליות מדויקות.
איך בדיוק הטכנולוגיה הזו עובדת?
התהליך די פשוט: המשתמש מפעיל את הפונקציה ו... שתף את אות המצלמה עם Gemini Live. משם, הבינה המלאכותית מנתחת את התמונה החיה, והמשתמש יכול לשאול כל דבר על מה שהוא רואה. התכונה החזקה ביותר היא שהיא מאפשרת לך לעשות שאלות המשךבמילים אחרות, אם ג'מיני מזהה קופסת שימורים, תוכלו לשאול אותה מיד מה תאריך התפוגה או אילו מרכיבים היא מכילה מבלי שתצטרכו להתחיל מחדש את השאילתה.
בניגוד לכלים אחרים, ראייה מודרכת מסוגלת להנחות את מסגור הטלפון הניידאם המכשיר מצביע גבוה מדי, קרוב מדי לאובייקט, או מעט מחוץ למרכז, העוזר ייתן לך הנחיות מילוליות לתקן זאת. להתאים את מיקום הטלפוןזה מבטיח שלבינה המלאכותית יהיה המידע החזותי הדרוש כדי למנוע טעויות בתיאור.
כלים פרקטיים לחיי היומיום
היישומים מגוונים להפליא ונוגעים בנושאים יומיומיים מאוד שלפעמים אנו מוצאים מאתגרים. לדוגמה, זה אידיאלי עבור לקרוא אותיות קטנות על תוויות תזונה או עלוני תרופות במקום בו זה לא נראה לעין. זה גם מאוד שימושי עבור לאתר חפצים אבודיםאתם יכולים להזיז את הטלפון בחדר ולבקש ממנו להתריע בפניכם כשהוא מזהה, למשל, אוזניות שנפלו על הרצפה או פלפל יין במטבח מלא בצנצנות.
יתר על כן, הכלי מתעמק בטריטוריה סובייקטיבית ואסתטית יותר. ראייה מודרכת יכולה לזהות דוגמאות, צורות וצבעיםאז אתה יכול לשאול אותה אם חולצה מפוספסת מתאימה למכנסיים ספציפיים או פשוט לברר מה צבע הבגד. היא אפילו יכולה לעשות תיאור כללי של שהייה לא ידוע או מפרט אילו דברים מונחים על השולחן.
תצורה ותאימות של אנדרואיד
כדי להתחיל, הדרך הישירה ביותר היא לפתוח את אפליקציית Gemini, לגשת להגדרות הפרופיל ו... בחר את האפשרות להשתמש בראייה מודרכת בשידור חי. לאחר שתסיים, פשוט פתחו את Gemini Live ושתפו את המצלמה. עבור אלו המחפשים מהירות נוספת, גוגל כללה את האפשרות ליצור גישה ישירה מתפריט הנגישות (סיוע חזותי), המאפשר הפעלה באמצעות מחוות של שתי אצבעות, הכפתור הצף או על ידי לחיצה בו זמנית על שני כפתורי עוצמת הקול.
באשר לדרישות הטכניות, התכונה פועלת בצורה חלקה על מכשירים עם אנדרואיד 9 או גרסאות מאוחרות יותרבתנאי ש-Gemini Live זמין בשפת המשתמש ובאזורו. חיוני שיהיו ברשותך גם מערכת ההפעלה וגם אפליקציית Gemini. מעודכן לגרסה האחרונהיתר על כן, הוא שולב במלואו עם Google TalkPack כדי למקסם את האוטונומיה של משתמשים עם לקויות ראייה.
תהליך הפיתוח ואזהרות הבטיחות
התקדמות זו לא נבעה מקריות, אלא משיתוף פעולה הדוק עם איירה, מומחית בפרשנות חזותיתכדי להבטיח שהמערכת תהיה אמינה באמת, אלפי שעות של נתונים מהעולם האמיתי ותמיכה של יותר מ 1.000 בודקים מרשת הבודקים המהימניםלהבטיח שהבינה המלאכותית מבינה איזה מידע אדם באמת צריך במצב יומיומי.
עם זאת, יש נקודה אחת שבה גוגל מתעקשת: הכלי הזה זה לא מכשיר רפואי וגם לא מערכת אבטחה. החברה מזהירה כי Guided Vision יכולה לעשות טעויות, ולכן, אסור להשתמש בו לניווט. ברחוב, לזהות מכשולים בדרך, או להחליף את תפקידו של כלב נחייה או מקל הליכה. מטרתו היא סיוע חזותי משליםלא מדריך הניידות הבטוחה.
שילוב זה של ראייה בזמן אמת מסמן שינוי פרדיגמה שבו איננו מסתגלים עוד לממשק הטלפון, אלא שבינה מלאכותית מסתגלת לסביבתנו. על ידי שילוב של זיהוי חזותי מתקדם עם ממשק קולי טבעי, גוגל הופכת את הטלפון הנייד ל... בן לוויה אינטליגנטי מסוגל לקרוא, לזהות ולהדריך את המשתמש בכל סיטואציה יומיומית.




