נקודות עיקריות
- •גוגל השיקה את Guided Vision כחלק מ-Gemini Live במכשירי אנדרואיד נתמכים.
- •הפיצ'ר מספק תיאור קולי של הסביבה והנחיות קוליות למיקום המצלמה בזמן אמת.
- •הכלי פותח עם קהילת העיוורים ומסייע בקריאת טקסט קטן, איתור חפצים והתאמת צבעים.
- •התכונה זמינה באנדרואיד 9 ומעלה, ומופצת בהדרגה באזורים שבהם פועל Gemini Live.
גוגל (Google) השיקה את פיצ'ר ה-Guided Vision ("הכוונה קולית") בתוך שירות השיחה הקולית Gemini Live. התכונה מיועדת לעיוורים, כבדי ראייה ולכל מי שזקוק לסיוע ויזואלי מהיר בחיי היום-יום.
הכלי שהוצג לראשונה בחודש הקודם, נועד להפוך את Gemini לשותף שיחה בזמן אמת באמצעות שיתוף מצלמת המכשיר.
המערכת מספקת תיאורים קוליים של הנקלט בעדשה, עונה על שאלות המשך ומנחה את המשתמשים כיצד לכוון את הפריים אם העדשה מוסטת הצדה או קרובה מדי.
סיוע קולי בזמן אמת ומיקום אובייקטים
Guided Vision פותחה בשיתוף קהילת הנגישות, תוך שיתוף פעולה עם ארגון Aira שכלל עשרות אלפי שעות אימון ויזואלי ומבחני שטח עם יותר מ-1,000 בודקים.
כאשר המצלמה אינה מכוונת כראוי אל האובייקט המבוקש, המערכת מנפיקה הנחיות קוליות טבעיות. בין היתר מציע העוזר להזיז את המכשיר ימינה, להטות אותו מטה או להתרחק, במטרה לקבל תמונה מלאה של המתרחש.
We’re launching Guided Vision in Gemini Live across compatible @Android devices. Built alongside the blind and low-vision community, Guided Vision offers conversational, real-time visual assistance.
Simply share your camera during a Gemini Live session to hear clear descriptions… pic.twitter.com/o4k0DAtWg2
— News from Google (@NewsFromGoogle) October 1, 2026
הפיצ'ר נועד לסייע במגוון תרחישים יומיומיים:
- קריאת טקסטים קטנים: פענוח תוויות מזון ורכיבים תזונתיים, קריאת הגדרות במכונות כביסה ומכשירי חשמל, וקריאת תפריטים בתנאי תאורה חלשים.
- איתור חפצים בסביבה: סריקת חללים לצורך מציאת פריטים אישיים, כגון אוזנייה שנפלה על הרצפה או תבלין מסוים בארון עמוס.
- זיהוי צבעים והתאמת פריטים: בדיקה והתאמה של פרטי לבוש, בדיקת דוגמאות בדים והגדרת גוונים של פריטים שונים.
- הכרת חללים לא מוכרים: תיאור מקיף של פריסת חדרים ומיקומם של רהיטים או חפצים המונחים על שולחן.
גוגל מציינת כי הכלי תומך בשיחה במגוון שפות ונבדק בקרב קהילות משתמשים במדינות שונות, בהן יפן, ברזיל, הודו וסינגפור.
הפעלה ודרכי גישה במכשירי אנדרואיד
הפעלת הפיצ'ר מתבצעת דרך תפריט ההגדרות באפליקציית Gemini, תחת האפשרות "שימוש בהכוונה קולית במצב Live", ולאחר מכן הפעלת שיחת Live ושיתוף המצלמה.
לגישה מהירה הוסיפה גוגל תמיכה במספר קיצורי דרך באנדרואיד:
- קיצורי דרך לנגישות: הגדרת כפתור נגישות צף, החלקה מעלה בשתי אצבעות מתחתית המסך או לחיצה ממושכת על שני כפתורי עוצמת הקול.
- אינטגרציה עם TalkBack: משתמשי קורא המסך של גוגל יכולים לפתוח את התפריט באמצעות הקשה בשלוש אצבעות ולבחור ישירות בהכוונה קולית.
אזהרות בטיחות וזמינות
גוגל מדגישה כי Guided Vision היא כלי עזר מבוסס בינה מלאכותית ועלולה לשגות בתשובותיה.
לפי החברה, המערכת אינה מוגדרת כמכשיר רפואי, אינה מהווה תחליף למקל נחייה או עזרי ניידות רשמיים, ואינה מיועדת לניווט במרחב, להנחיית תנועה בטוחה או לזיהוי מכשולים פיזיים.
הפיצ'ר מופץ בהדרגה למכשירי אנדרואיד המריצים אנדרואיד 9 ומעלה, במדינות שבהן זמין Gemini, ובהן ישראל. גוגל ציינה כי ההפצה תלויה גם במכשיר ובשפה, ולא פרסמה רשימת שפות נתמכות. לכן לא ברור עדיין אם ההכוונה הקולית תפעל בעברית, למרות ש-Gemini Live עצמו זמין בעברית.
