Домой ИИ и технологии Функция Guided Vision для Gemini помогает незрячим пользователям взаимодействовать с окружением

Функция Guided Vision для Gemini помогает незрячим пользователям взаимодействовать с окружением

В рамках сентябрьского обновления Android 2026 года Google представила Guided Vision для Gemini Live — инструмент, помогающий людям с нарушениями зрения через камеру смартфона.

Спустя почти четыре года после начала бума генеративного искусственного интеллекта многие представленные решения ограничиваются корпоративной перепиской или созданием изображений. Однако новая функция Guided Vision, ставшая частью сентябрьского обновления Android 2026 года для Gemini Live, демонстрирует реальную практическую пользу технологии. Этот инструмент был разработан специально для незрячих и слабовидящих пользователей, фактически превращая камеру смартфона в «говорящие глаза».

Женщина использует функцию Guided Vision на смартфоне для получения визуальной помощи
Пользователь получает голосовые подсказки для наведения камеры на нужный объект

Как работает процесс визуального сопровождения через камеру

Функция Guided Vision работает в режиме реального времени: пользователь предоставляет Gemini Live доступ к прямой трансляции с камеры и задает вопросы о предметах вокруг себя. Например, если человек ищет нужную специю на полке, ИИ анализирует видеопоток и дает голосовые инструкции.

Ключевым отличием Guided Vision от привычных приложений является интерактивность. Если камера направлена в сторону или пользователь выбрал неудачный ракурс, Gemini не прекращает работу, а в режиме диалога направляет его, подсказывая, как лучше изменить положение смартфона, например, сдвинуть устройство в сторону. Интеграция с системой Android позволяет запускать инструмент через меню TalkBack или специализированные ярлыки доступности, избавляя от необходимости искать нужные настройки в подменю.

Доступность на старых моделях устройств

Важным аспектом Guided Vision является широкая поддержка аппаратного обеспечения. В отличие от некоторых других нововведений сентябрьского обновления, таких как Motion Assist (требует Android 17) или функции запоминания объектов в Find Hub (требует Android 16), Guided Vision совместима с любым телефоном, на котором работает приложение Gemini. Это означает поддержку всех устройств под управлением Android 9 и выше, имеющих минимум 2 ГБ оперативной памяти. Поддержка устаревших моделей критически важна, так как позволяет использовать вспомогательные технологии без необходимости покупки нового дорогостоящего смартфона.

Место между специализированным ПО и помощью человека

Guided Vision занимает промежуточное положение между существующими решениями для визуальной помощи. Приложения вроде Lookout от Google обычно работают с одиночными снимками, требуя выбора режима для каждой задачи — например, чтения текста или проверки купюр. Сервис Be My Eyes соединяет пользователя с волонтерами, что подразумевает видеозвонок незнакомому человеку.

Guided Vision для Gemini — иллюстрация 2 к материалу
Инструмент Guided Vision помогает скорректировать ракурс съемки в режиме диалога

Guided Vision объединяет лучшее из двух подходов: благодаря диалоговой природе Gemini Live пользователь получает полноценный разговор. ИИ может отвечать на уточняющие вопросы о планировке помещения, подсказывая, что именно нужно показать камере для получения более точного ответа. Это создает непрерывный процесс взаимодействия, где телефон выступает в роли помощника, присутствующего в задаче до самого её завершения.

Ограничения безопасности и целевое назначение

Несмотря на полезность, Google установила строгие границы применения Guided Vision. Разработчики официально предупреждают, что технология может ошибаться в распознавании объектов, поэтому она не является медицинским устройством или вспомогательным средством для передвижения.

Guided Vision для Gemini — иллюстрация 3 к материалу
Технология доступна на смартфонах с Android 9 и выше

Функция категорически не предназначена для навигации или обнаружения препятствий в режиме реального времени. На основе ответов ИИ нельзя принимать решения о безопасности пересечения пешеходного перехода или проверять чистоту прохода на лестнице. Google подчеркивает разницу между определением банки супа на кухне и навигацией в сложных городских условиях, исключая возможность использования модели как полноценной замены зрению при перемещении в пространстве.

Технологический контекст и эволюция ИИ-помощников

Для пользователей вспомогательных технологий традиционные приложения часто кажутся консервативными и даже архаичными. Например, сервис Lookout требует от пользователя предварительного выбора режима перед началом работы: проверка банкнот и чтение письма — это две независимые процедуры. Хотя Lookout получил обновление и теперь может использовать возможности Gemini для описания фото и ответов на последующие вопросы, он по-прежнему ограничен анализом одного статичного снимка за раз. В то же время сервис Be My Eyes, предоставляя возможность живого общения с волонтерами, все еще опирается на видеозвонок с участием незнакомого человека, что не всегда удобно или приватно.

Guided Vision представляет собой логичный следующий шаг для мобильного ИИ. Поскольку в основе системы лежит движок Gemini Live, вы получаете полноценный интерактивный диалог, который не под силу инструментам, работающим с «фотографиями по отдельности». Вы можете вести непрерывный разговор об окружающем пространстве: ИИ будет подсказывать, куда направить камеру, чтобы получить более точную информацию, и отвечать на уточняющие вопросы о планировке комнаты или расположении мебели. Телефон при таком подходе перестает быть просто пассивным сенсором и становится полноценным участником процесса, который сопровождает пользователя до выполнения конкретной задачи.

Guided Vision для Gemini — иллюстрация 4 к материалу
Google предупреждает, что ИИ не подходит для навигации или обеспечения безопасности при движении

Почему навигация осталась «за бортом»

Превращение генеративной модели в суррогат зрения несет в себе серьезные риски. Ошибка ИИ, интерпретирующего ситуацию на оживленном тротуаре, может привести к травмам. Google четко обозначила границы ответственности: компания прямо предупреждает, что Guided Vision может совершать ошибки в идентификации объектов. Важно понимать, что это не медицинский прибор или полноценное средство обеспечения мобильности. ИИ не выступает заменой классическим средствам навигации и не предназначен для обнаружения препятствий в реальном времени. Безопасность на пешеходном переходе или проверка лестничного марша — задачи совершенно иного уровня сложности, нежели поиск банки супа на кухонной полке. Разработчики намеренно провели эту линию, чтобы исключить возможность опасного использования инструмента в условиях, требующих критической оценки обстановки.

Вердикт: когда технология действительно работает

В мире, где большая часть генеративного ИИ по-прежнему выглядит как «сырой» и юридически неоднозначный продукт, Guided Vision является примером технологии, которая нашла свою обоснованную нишу. Распознавание плохо читаемого меню в ресторане или поиск конкретной специи — это не просто демонстрационные кейсы для конференций разработчиков. Это лучший на сегодняшний день пример реализации потенциала ИИ в выполнении реальных, повседневных задач, которые действительно упрощают жизнь конкретным людям.