Gemini Guided Vision, Lookout и Be My Eyes: сравнение для Android

Выберите помощника по тому, что нужно увидеть

Для описания того, что находится перед камерой сейчас, выбирайте Gemini Guided Vision, если функция доступна в вашем Gemini Live. Для чтения документа, текста или этикетки начните с соответствующего режима Lookout. Если у вас уже есть фотография и нужны подробности или помощь человека, подойдет Be My AI в Be My Eyes. Полезное различие здесь — способ получения ответа: непрерывная камера, специализированный режим или обсуждение отдельного снимка.

Перед запуском сформулируйте одну цель: прочитать строку меню, узнать название предмета или разобрать страницу. Это определяет и выбор приложения, и критерий завершения. Общее описание «на столе лежит бумага» не решает задачу чтения документа. Подробный ответ по фотографии, наоборот, может быть достаточен, если вам не требуется менять положение камеры во время разговора.

При поиске предмета дома сначала определите, нужна ли вам подсказка по кадру или описание уже сделанной фотографии. Для строки меню важнее сохранить связь между названием блюда и ценой. Описание может пропустить деталь или неверно ее истолковать, поэтому уверенность ответа не служит критерием выбора.

Все три варианта помогают получить визуальную информацию, но управление самим интерфейсом телефона — отдельная задача. Настройка таких средств разобрана в статье Телефон с голосовым управлением для незрячих: TalkBack, Voice Access и FoneClaw. FoneClaw в этом сравнении используется только для необязательного сохранения проверенного результата.

Проверьте запуск, язык и доступность на Android

Google запустила Guided Vision 1 октября 2026 года для Android 9 и новее в регионах и на языках, поддерживаемых Gemini Live. Согласно анонсу Google о Guided Vision, при включенной функции и передаче изображения с камеры Live дает голосовые описания в реальном времени и подсказывает, как изменить кадр.

В Gemini откройте меню профиля → настройки → «Использовать Guided Vision в Live», затем начните Live и включите передачу изображения с камеры. Предусмотрен также путь в настройках Android: «Специальные возможности» → «Помощь зрению» → ярлык Guided Vision. Пользователи TalkBack могут обратиться к соответствующему пункту через меню, вызываемое касанием тремя пальцами. Обновите приложение и систему, проверьте разрешение камеры и наличие функции на своем устройстве: версия Android сама по себе не подтверждает доступ ко всем пунктам меню.

В руководстве Google по Lookout перечислены режимы текста, исследования окружающего пространства, этикеток продуктов, документов, валюты, изображений и поиска предметов. Режим документов дает подсказки при захвате камерой; режим изображений работает со сделанными или переданными снимками. Режим исследования остается бета-функцией и менее точен, чем другие режимы.

Языковые условия проверяйте для конкретной возможности. Подробные описания в режиме изображений Lookout доступны на английском. Уточняющие вопросы к ИИ предусмотрены для англоязычных пользователей в США, Великобритании и Канаде. Это не означает, что такие вопросы работают на всех языках приложения. Режим этикеток доступен в некоторых странах и после загрузки дополнительных данных может работать без интернета; это условие не распространяется автоматически на другие режимы.

Be My AI доступен на Android и требует подключения к интернету. В инструкции Be My Eyes по Be My AI описан разговор по фотографии: после описания можно задать вопрос или добавить снимок через функцию уточнения. Для доступного публичного изображения на Android удерживайте его, выберите отправку изображения и действие описания с Be My AI. С TalkBack используется двойное касание с удержанием. Этот способ оптимизирован для экранного диктора; он не превращает анализ фото в непрерывный анализ видео.

Уточните описание и проверьте важные детали

Возьмем этикетку продукта. Сначала выберите задачу: прочитать название, найти определенную строку или описать упаковку. В Lookout используйте подходящий режим, в Guided Vision попросите помочь направить камеру на нужную область, а в Be My AI передайте снимок и задайте конкретный вопрос. Запрос «прочитай строку под названием» легче проверить, чем общее «что здесь написано».

Разделяйте три результата: объект попал в кадр, нужный текст был прочитан и сведения оказались достаточно надежными для вашей задачи. Первый результат не подтверждает второй, а второй не гарантирует третий. Например, описание цвета упаковки не доказывает, что разобрана маркировка модели. Ответ должен относиться к запрошенной области, а не к похожему предмету в другом месте кадра.

Если ответ неполный, улучшите исходное изображение: уберите блик, приблизьте нужную область, сохраните края строки в кадре и повторите снимок. Попросите отделить читаемый текст от предположений. При возможности сравните ответ с оригиналом; если самостоятельно проверить деталь не получается, обратитесь за помощью к человеку. Повторение того же ответа моделью не является независимым подтверждением.

Для чисел и коротких обозначений уточняйте всю последовательность, включая единицы измерения и соседнюю подпись. Когда ответы расходятся, оставьте поле неподтвержденным вместо выбора более удобного варианта. Новый снимок должен показывать спорную деталь лучше; повторная отправка неизмененного размытого изображения не устраняет нехватку исходной информации.

В Be My Eyes доступна помощь волонтеров, когда описание ИИ не решает задачу. Используйте доступный в вашем Android-приложении способ получения помощи; расположение кнопок и переходы не следует переносить из инструкции для iPhone. Для финансовых сведений, личных документов и дозировок лекарств не полагайтесь только на интерпретацию ИИ.

Guided Vision — вспомогательная функция, которая может ошибаться. Она не является медицинским устройством, средством безопасного передвижения или заменой белой трости и не предназначена для навигации либо обнаружения препятствий. Подсказка повернуть камеру помогает получить кадр, но не подтверждает, что можно безопасно идти в указанном направлении.

Разберите меню, документ и маркировку предмета

Следующие примеры — предложенные способы проверки на вашем телефоне. Для каждого заранее определите нужное поле, получите описание и решите, достаточно ли исходного изображения для подтверждения результата. Они не предполагают, что приложение обязательно распознает все детали.

Меню в кафе. Для чтения строк начните с режима текста Lookout. Если трудно расположить страницу в кадре, доступный Guided Vision может дать подсказки по направлению камеры. Если снимок уже сделан, можно обсудить его в Be My AI. Попросите прочитать название выбранного блюда и цену в той же строке, сохранив указание размера порции, если оно видно. Проверяемый результат — именно эта связка, а не перечень всех найденных цен.

Когда название и цена могут относиться к соседним строкам, снимите нужный участок повторно вместе с заголовком раздела. Если связка остается неясной, уточните ее у сотрудника кафе. Вопрос об аллергенах также подтверждайте у сотрудника: отсутствие слова в ответе ИИ не подтверждает отсутствие ингредиента.

Лист с инструкцией. Выберите режим документов Lookout и следуйте подсказкам захвата, чтобы страница попала в кадр. Попросите прочитать заголовок и нужный пункт; для нескольких листов указывайте, какой лист сейчас перед камерой. Результат должен сохранять порядок текста и различать основной пункт, примечание и подпись. До дальнейшего использования проверьте, не обрезан ли конец строки.

Если текст неполный, повторите захват при более ровном освещении или передайте отдельный четкий снимок для уточнения. Если номер пункта или число по-прежнему неразборчивы, попросите человека проверить оригинал. Для перевода уже полученного изображения пригодится отдельный выбор инструментов: Лучшие приложения для перевода скриншотов на Android: четыре варианта для разных задач.

Маркировка бытового предмета. Для фотографии фильтра или другой детали используйте Be My AI либо режим изображений Lookout с учетом его языковых условий. Сначала запросите описание предмета, затем отдельно — видимое обозначение модели. Проверяемый результат — строка маркировки, которую можно сверить, а не вывод о совместимости по внешнему сходству. При блике поверните предмет или переснимите табличку; при неясных символах обратитесь к человеку. Режим этикеток продуктов не следует считать универсальным распознавателем любых технических наклеек.

Смените способ, если функция недоступна или ответ неполный

Отсутствие пункта запуска и неудачное описание требуют разных действий. Если Guided Vision не появляется в меню, сначала проверьте обновления Gemini и системы, версию Android, язык и регион относительно условий Gemini Live. Разрешение камеры важно для передачи изображения, но его выдача не создает отсутствующую функцию. Пока нужный пункт недоступен, выберите режим Lookout для своей задачи или описание отдельного фото в Be My AI.

Если функция открывается, но не видит нужного объекта, проверяйте входные данные: включена ли передача камеры, попала ли нужная область в кадр, достаточно ли света. Для Lookout дополнительно проверьте режим. Общее исследование сцены не следует предпочитать режиму документов, когда требуется прочитать страницу; его бета-статус и меньшая точность также имеют значение.

Когда описание есть, но уточняющий вопрос недоступен, проверьте условия именно этой возможности. В Lookout подробные описания изображений на английском и вопросы к ИИ для англоязычных пользователей США, Великобритании и Канады имеют более узкие условия, чем приложение в целом. Русская инструкция или русская локализация телефона не расширяют этот доступ.

Be My AI требует интернет: повторные вопросы без соединения не заменят его. Для условной офлайн-работы этикеток Lookout подготовьте дополнительные данные заранее. Если информация нужна для важного решения сейчас, обращайтесь к человеку, вместо того чтобы считать отсутствие ответа подтверждением своей догадки.

Сохраните проверенный результат как личную задачу

Когда нужная информация подтверждена, решите, что стоит сохранить: название предмета, короткую заметку или следующий шаг. Не рассчитывайте на список недавних результатов Lookout как на постоянное хранилище: его содержимое удаляется при закрытии приложения. Проверьте сохранение важного текста отдельно, прежде чем завершать работу.

Перед сохранением отделите прочитанное от предположений. Например, запишите «на маркировке указано такое-то обозначение», а вопрос совместимости оставьте отдельной задачей для уточнения. Не превращайте неразборчивую дату или сомнительное число в установленный факт только потому, что модель включила их в связный ответ.

В FoneClaw можно передать проверенный текст и попросить сохранить его как личную заметку или задачу. Например: «Сохрани задачу: уточнить размер сменного фильтра, без срока». Если дату вы не указали, добавлять ее не нужно. Выбранная модель внутри FoneClaw интерпретирует запрос и составляет план, а включенные инструменты выполняют поддерживаемое сохранение с учетом разрешений и фактической политики подтверждения. После выполнения откройте запись и проверьте текст.

Можно также самостоятельно выбрать фото для интерпретации в FoneClaw, если настроена совместимая модель с визуальными возможностями. Параметр поддержки изображений не добавляет зрение текстовой модели. Большие выбранные фотографии оптимизируются, их ориентация корректируется; онлайн-модель может получать переданный вами контекст. Передавайте только нужные для задачи сведения. Эти возможности описаны на странице функций FoneClaw.

Такое сохранение — отдельный шаг по вашей инициативе. Оно не предполагает встроенного соединения с Be My Eyes или Lookout и не заменяет работу Guided Vision с камерой. Если следующая задача касается кнопок и данных на экране Android, полезен материал Понимание экрана ИИ на Android: UI-состояние, скриншот и безопасное действие.