Gemini's Guided Vision: искусственный интеллект, который видит и описывает ваше окружение.

Последнее обновление: 21/09/2026

  • Функция Guided Vision предоставляет аудиоописания через камеру и Gemini Live.
  • Он разработан специально для слепых и слабовидящих людей.
  • В нем содержатся инструкции по оформлению, центрированию объектов или перемещению по комнате.
  • Оно умеет считывать этикетки, расшифровывать меню и распознавать предметы домашнего обихода.
Управляемое видение Близнецов

Использовать камеру телефона, чтобы спросить у Gemini, что находится перед вами, — это не совсем новая функция. Однако Google готовит более специфичную функцию, которая выходит за рамки распознавания объектов: она также предоставляет звуковые подсказки для правильного кадрирования сцены и получить более полезное описание.

Этот инструмент называется Управляемое зрение и является частью Gemini Live. Он разработан для слепых или слабовидящих людей, хотя может быть полезен и для чтения трудноразличимых надписей, ориентирования на карте в условиях недостаточного освещения или распознавания некоторых предметов домашнего обихода.

Однако система Guided Vision не предназначена для замены зрения, вспомогательных технологий для передвижения или здравого смысла пользователя. Искусственный интеллект может неправильно интерпретировать изображение с камеры, поэтому важно понимать как его возможности, так и ограничения.

Gemini Intelligence
Статья по теме:
Gemini Intelligence: Вот как Google хочет превратить Android в по-настоящему интеллектуальную систему.

Что такое управляемое зрение и как оно работает?

Что такое управляемое зрение и как оно работает?

Функция Guided Vision — это функция обеспечения доступности, встроенная в данную систему. Gemini Live Он в режиме реального времени анализирует то, что снимает камера телефона, и предоставляет голосовые описания. Пользователь может общаться с ассистентом, задавать вопросы об окружающей обстановке и получать подсказки для правильного определения того, что он хочет увидеть.

Главное отличие от традиционного использования камеры в Gemini Live заключается в следующем: Слуховая ориентация во время кадрированияЕсли объект находится вне кадра, расположен слишком близко или плохо виден, Близнецы могут попросить вас переместить телефон, медленно осмотреть комнату камерой или сфокусироваться на конкретном предмете.

Например, если вы хотите узнать состав продукта, система Guided Vision может предложить вам увеличить изображение этикетки, отодвинуть телефон в сторону или держать камеру неподвижно. Как только изображение станет достаточно четким, система попытается прочитать и описать информацию.

Эксклюзивный контент – нажмите здесь  SynthID: технология Google для выявления контента, созданного с помощью ИИ.

Ответ не обязательно должен ограничиваться общим описанием. Запустив программу в рамках Gemini Live, вы можете выполнить следующие действия: последовательные вопросы Запросить более подробную информацию, уточнить ответ или сосредоточиться на конкретной части сцены.

Что можно делать с помощью управляемого зрения?

Управляемое видение Близнецов

Google представляет Guided Vision как вспомогательный инструмент для решения повседневных задач, требующих визуального восприятия. Среди подтвержденных компанией областей применения можно выделить следующие:

  • Внимательно читайте мелкий шрифт: Это может помочь сосредоточиться на содержании этикеток продуктов питания, упаковки и других трудноразличимых текстов, а также ознакомиться с ними.
  • Для просмотра диаграмм используйте их при слабом освещении: Это позволяет навести камеру на меню ресторана и попросить Gemini описать или зачитать его содержимое.
  • Определите предметы домашнего обихода: Она способна распознавать элементы в поле зрения камеры и помогать вам их различать.
  • Изучите сцену: Ассистент может попросить вас медленно панорамировать изображение, чтобы собрать больше информации об окружающем вас пространстве.
  • Получите более точные описания: Вы можете задать дополнительные вопросы об объекте или конкретной части изображения.

Данный инструмент не функционирует как система слежения. Он не может определить местоположение объекта, невидимого для камеры, и не может узнать, где что-либо было оставлено ранее. Его возможности ограничены следующим: Проанализируйте изображения, которыми обменивались во время разговора..

Также не следует предполагать, что система всегда будет правильно распознавать текст, товары, расстояния или визуальные характеристики. Освещение, движение, качество камеры и положение объекта — всё это может влиять на результат.

Требования Gemini Intelligence к Android
Статья по теме:
Gemini Intelligence на Android: совместимые телефоны, реальные требования и кто остался вне списка поддерживаемых устройств.

Как активировать функцию «Управляемое зрение» на Android

Крупный план объектива камеры смартфона, сфокусированного на этикетках товаров, демонстрирующий функцию чтения мелкого шрифта.

Если на вашем устройстве доступна функция Guided Vision, вы сможете настроить её через меню. Настройки приложения GeminiGoogle также позволит вам запустить его из меню TalkBack или добавить в ярлыки специальных возможностей Android.

Эксклюзивный контент – нажмите здесь  Что делать, если приложение Xbox не обнаруживает установленную игру?

Доступные сочетания клавиш могут различаться в зависимости от телефона и системных настроек. Android позволяет назначать определенные функции специальных возможностей плавающей кнопке, ярлыку в быстрых настройках или одновременному нажатию обеих клавиш регулировки громкости.

Следовательно, кнопки регулировки громкости не являются исключительным инструментом управления функцией Guided Vision. Для их использования необходимо... предварительно назначить функцию сочетанию клавиш специальных возможностей. соответствующий.

Общая процедура будет следующей:

  1. Обновите приложение Близнецы из Google Play.
  2. Откройте Gemini и перейдите в настройки приложения.
  3. Найдите этот вариант. Управляемое зрение когда он станет доступен.
  4. Завершите первоначальную настройку и предоставьте необходимые разрешения для использования камеры и микрофона.
  5. Если вы используете TalkBack, проверьте доступные параметры в его меню.
  6. Также вы можете зайти в настройки специальных возможностей Android и связать функцию «Управляемое зрение» с одним из поддерживаемых ярлыков.

Для использования вам потребуется запустить Gemini Live, поделиться изображением с камеры и объяснить голосом, что вам нужно идентифицировать или прочитать. После этого ассистент проанализирует изображение и сможет подсказать, как переместить телефон, чтобы улучшить кадрирование.

Точное расположение элементов управления может различаться в зависимости от производителя, версии Android и модели телефона. Кроме того, эта опция может появиться не сразу, даже если вы обновили приложения, поскольку Google в данный момент проводит обновление. постепенное внедрение.

Требования к системе управляемого зрения и ее доступность

Функция Guided Vision появится на совместимых телефонах, использующих Android 9 или более поздняя версияДля использования этой функции не потребуется Android 17, поскольку она распространяется в основном через приложение Gemini и сервисы Google.

Необходимо также соблюдать следующие условия:

  • Используйте совместимое устройство Android.
  • Установите и обновите приложение Gemini.
  • Находиться в стране, где доступен сервис Gemini.
  • Завершите первоначальную настройку функции.
  • Предоставьте доступ к камере и микрофону.
  • иметь хотя бы 18 лет.

Компания Google анонсировала функцию Guided Vision как одну из будущих. Поэтому её доступность может варьироваться в зависимости от страны, языка, устройства и используемой учетной записи. Даже если телефон соответствует минимальным требованиям, инструмент не станет доступен всем пользователям в один и тот же день.

Эксклюзивный контент – нажмите здесь  Полное руководство по меню дополнительных настроек в Windows 11: как получить доступ ко всем его параметрам и использовать их

Функцию Guided Vision не следует путать с общей функцией камеры Gemini Live. Последняя позволяет вести диалоги о том, что видит телефон, в то время как Guided Vision включает в себя функцию, специально разработанную для... визуальная доступность и звуковое сопровождение оформления.

Важные предупреждения и ограничения

Человек в инвалидной коляске использует мобильный телефон, демонстрируя возможности применения этого инструмента для повышения доступности в повседневной жизни.

Как и любая функция, основанная на искусственном интеллекте, Guided Vision может совершать ошибки, пропускать важные элементы или неправильно описывать то, что находится перед камерой. Google прямо предупреждает об этом. Это не медицинское устройство и не средство передвижения..

Следовательно, его не следует использовать для:

  • Передвигайтесь по улицам, зданиям или другим пространствам.
  • Обнаружение препятствий во время движения.
  • Пересечение дороги или выявление опасных ситуаций.
  • Замените трости, собак-поводырей или другие средства передвижения.
  • Замените советы профессионалов или гидов, специализирующихся на безопасном путешествии.
  • Принимать медицинские, диетические решения или решения, касающиеся безопасности, основываясь исключительно на реакции Близнецов.

Также рекомендуется избегать передачи изображений, содержащих личные данные, конфиденциальные документы, банковскую информацию или изображения других людей без их согласия. Хотя камера помогает ориентироваться в окружающей обстановке, ответственность за выбор отображаемой информации для помощника по-прежнему лежит на пользователе.

Функция Guided Vision представляет собой значительный шаг вперед в обеспечении доступности Android, объединяя камеру, голосовой чат и подсказки по кадрированию в реальном времени. Она может быть весьма полезна для чтения трудноразличимого текста или распознавания повседневных предметов, но ее следует использовать… дополнительный инструмент и ни в коем случае не в качестве замены решений, специально разработанных для обеспечения мобильности и безопасности.

Близнецы. Личный интеллект.
Статья по теме:
Персональный интеллект Близнецов: Именно так Google хочет, чтобы его ассистент по-настоящему узнал вас.
Альберто Наварро

Alberto Navarro

Я — энтузиаст технологий, превративший свои увлечения в профессию. Более 10 лет я использую передовые технологии и экспериментирую со всевозможными программами из чистого любопытства. Сейчас я специализируюсь на компьютерных технологиях и видеоиграх. Более 5 лет я пишу для различных сайтов, посвященных технологиям и видеоиграм, создавая статьи, цель которых — предоставить вам необходимую информацию на понятном каждому языке.

Если у вас есть какие-либо вопросы, мои знания варьируются от всего, что связано с операционной системой Windows, а также Android для мобильных телефонов. И я предан вам, я всегда готов потратить несколько минут и помочь вам решить любые вопросы, которые могут у вас возникнуть в этом мире Интернета.