Guided Vision запускається сьогодні в Gemini Live на сумісних пристроях Android і використовує штучний інтелект для надання звукових описів у реальному часі всього, на що ви наводите камеру телефону. Коли ви ділитеся своєю камерою з Gemini Live, штучний інтелект Google може допомогти вам читати дрібний текст, описувати навколишнє середовище, знаходити чи ідентифікувати об’єкти навколо вас, пояснювати деталі конкретних об’єктів тощо.

Подібно до функції VoiceOver Live Recognition, яку Apple додала до iPhone і Vision Pro, ця функція розроблена для людей, які є сліпими, мають слабкий зір або потребують допомоги в певних ситуаціях. На додаток до програми Gemini, Guided Vision також доступний у Google TalkBack після того, як було оголошено в серії останніх оновлень Pixel. Користувачі також можуть налаштувати цей ярлик спеціальних можливостей у програмі «Налаштування» на пристроях з ОС Android 9 або новішої версії.

Ви також можете задавати додаткові запитання про те, що ви дивитеся, наприклад, щоб Близнюки зачитали дати закінчення терміну придатності предметів, які ви знайшли. Google каже, що Gemini надасть звукові підказки для налаштування положення камери, коли ви запитаєте про щось, чого немає на фотографії. Однак Google застерігає користувачів не покладатися на Guided Vision для таких цілей, як «навігація, безпечне супроводження подорожей, виявлення перешкод» або як заміна тростини чи засобів для пересування.