Gemini Guided Vision・Lookout・Be My Eyes比較:Androidの視覚支援を用途で選ぶ
リアルタイムのカメラ説明、文字や書類の読み取り、写真への追加質問と人の支援で3つを比較。Androidの設定、言語・通信条件、回答を確かめる方法を解説します。
- カメラを向けながら説明や構図の調整案内を聞くならGemini Guided Vision、文字・書類・食品ラベルなど目的別に読むならLookout、写真について追加質問し、必要なら人の支援も求めたいならBe My Eyesが候補です。
- Guided VisionはAndroid 9以降で、Gemini Liveが対応する地域・言語が条件です。Lookoutの画像詳細説明や追加質問にも独自の言語・地域条件があり、日本語の記事で紹介されていることは日本語での全機能提供を意味しません。
- Be My AIにはインターネット接続が必要です。Lookoutの食品ラベルモードは、一部の国で追加データをダウンロードした後にオフラインで使えますが、全モードがオフライン対応という意味ではありません。
- 説明は誤ることがあるため、重要な文字や数字は撮り直しや人の支援で確認します。確認済みの内容を個人用メモやタスクに残す作業は、視覚支援とは別に進められます。
目の前で確認したいものから選ぶ
Androidの視覚支援を選ぶなら、まず何を確かめたいかを決めます。カメラを向けたまま周囲の説明や撮影方向の案内を聞きたいならGemini Guided Vision、メニューの文字や書類、食品ラベルなどを目的別に読むならLookout、写真の説明を聞いて細部を質問したいならBe My EyesのBe My AIが候補です。Be My Eyesには、AIの回答だけでは足りない時にボランティアの支援を求める経路もあります。
| 選択肢 | 入力と使い方 | 向いている確認 | 通信・提供条件 | 結果の確認と次の手段 |
|---|---|---|---|---|
| Gemini Guided Vision | Gemini Liveでカメラを共有 | リアルタイムの音声説明、カメラの向きや構図の調整案内 | Android 9以降、Gemini Liveの対応地域・言語。オフライン利用を前提にしない | 対象が画面に収まったかを確認し、重要な内容は元の表示や人の支援で確かめる |
| Lookout | 目的別のカメラモード、撮影・共有した画像 | 文字、書類、食品ラベルなど、対象を絞った読み取り | モードごとに言語、地域、追加データ、通信条件を確認 | 必要な文字や数字を確認し、適切なモードへの変更、撮り直し、人への確認を選ぶ |
| Be My Eyes/Be My AI | 写真の説明後に文章や追加写真で質問 | 写真の細部を確認し、必要なら人の支援を求める | Androidで利用可能。Be My AIはインターネット接続が必要 | 追加質問や別の写真で不足部分を確認し、解決しなければボランティアの支援を求める |
たとえば家にある物の見た目を知りたい場面でも、その場でカメラの向きを調整したいのか、撮った写真を落ち着いて質問したいのかで入口は変わります。文字が主な目的なら、全体の説明より文字・書類向けのモードを選ぶほうが、確認したい結果を明確にできます。ここでは精度を実測した順位ではなく、入力方法と作業の違いで比較します。
ライブ映像では、カメラを動かすたびに説明の対象も変わります。静止画では、同じ場面を参照して細部を尋ねられますが、撮影後に変わった状態は写っていません。「今どの面を向けているか」を知りたいのか、「この一枚にある文字を読みたい」のかを先に決めると、途中で別の経路へ切り替える判断もしやすくなります。
Androidの入口と言語・通信条件を確認する
GoogleのGuided Vision発表では、2026年10月1日にAndroid 9以降向けの提供が始まり、Gemini Liveが対応する地域と言語で利用できると案内されています。Geminiのプロフィールから「設定」へ進み、LiveでGuided Visionを使う設定を有効にして、Gemini Liveでカメラを共有します。音声によるリアルタイムの説明に加え、カメラの向きを調整する案内を受けられます。
Androidの「ユーザー補助」→「視覚支援」→「Guided Vision」からショートカットを設定する入口もあります。TalkBackを使う場合は、3本指でタップして開くメニューから進む経路も案内されています。設定が見つからない時は、Geminiアプリとシステムを更新し、端末・地域・言語の条件を確認してください。スマホ自体の読み上げや音声操作も整えたい場合は、視覚障害者向け音声操作スマホ:TalkBack・Voice Access・Gemini・FoneClawの使い分けで、それぞれの役割を確認できます。
Lookoutには、文字、探索(ベータ版)、食品ラベル、書類、通貨、画像、検索のモードがあります。書類モードは撮影位置をリアルタイムに案内し、画像モードは撮影した画像や共有された画像を扱います。GoogleのLookout利用ガイドで、読みたい対象に合うモードと対応言語、カメラ権限を確認します。食品ラベルは一部の国で提供され、追加データのダウンロード後はこのモードをオフラインで使えます。画像の詳細説明は英語で、AIへの追加質問は米国・英国・カナダの英語ユーザー向けです。アプリが対応するすべての言語で同じ機能が使えるわけではありません。
Be My AIの公式利用ガイドでは、Androidで写真の説明を受けた後、追加質問(Ask More)に文章や別の写真を使えます。連続した動画を解析する使い方とは異なり、インターネット接続が必要です。Androidで共有可能な画像を長押しするか、TalkBackでダブルタップして押し続け、画像の共有から「Be My AIで説明」を選ぶ経路もあります。スクリーンリーダー向けに最適化されているため、写真を撮る入口と、既存画像を共有する入口を使い分けられます。
最初の確認には、個人情報を含まない、内容を自分や同席者が確かめられる対象を選びます。目的の機能が表示されるか、カメラを使えるか、説明を聞けるかを順に見てください。日本語のメニューが表示されることだけでは、英語限定の画像説明や追加質問まで使えるとは判断できません。
説明を確かめ、必要なら撮り直す
確認したい項目は、料理名と価格、書類の日付と場所など、具体的に絞ります。回答を聞く時は、求めた項目がすべて含まれているか、どの対象の説明なのかを確認します。全体が写っていない、文字が小さい、光が反射している場合は、説明を繰り返し求めるだけでなく、位置や照明を変えて撮り直してください。Guided Visionではカメラの調整案内を使えますが、その説明自体にも誤りがあり得ます。
「読み取れたこと」と「推測されたこと」も分けます。日付の一部が見えない時に残りを補わせたり、容器の色から商品を決めさせたりすると、必要な確認が省かれてしまいます。追加質問では「見えない文字は推測せず、読めた部分を教えて」と対象を絞れますが、この依頼も正確さを保証するものではありません。重要な項目は、元の表示を確認できる人や別の信頼できる情報と照合します。
Lookoutの探索はベータ版で、他のモードより正確さが低いと案内されています。重要な文字や数字には対象に合うモードを使い、回答が曖昧なら元の表示や人の支援で確認します。Be My Eyesではボランティアに助けを求められますが、Androidの実際の画面で利用できる経路を確認してください。iOSで紹介されている切り替え操作が、そのままAndroidにあるとは限りません。
Guided Visionは医療機器や移動補助具ではなく、白杖の代わりにもなりません。道案内、安全な移動、障害物の検出を任せる用途として扱わないでください。また、薬の用量、金融情報、重要な個人情報の解釈はAIの回答だけで決めず、適切な人や信頼できる情報で確認します。説明が自然に聞こえることと、判断に必要な情報が正しいことは別です。
画像中の外国語を翻訳したい場合は、視覚的な説明とは別の目的になります。Androidのスクリーンショット翻訳アプリ4選:画像の取り込み方と翻訳結果で選ぶで、画像の取り込みと翻訳結果を基準に選べます。
メニュー・書類・家庭のラベルで使い分ける
次の三つは、目的を絞って試すための手順例です。実測結果や、どのアプリでも同じ回答が得られることを示すものではありません。必要な情報、使う入口、確認する結果、足りない時の次の手段を一組にして考えます。
メニュー:料理名と価格の対応を確認する
知りたいのが一品の名前と価格なら、Lookoutの文字モードや書類モードで、その項目が読める位置から始めます。カメラを合わせる案内が必要なら、利用条件を満たすGuided Visionで位置を調整する選択肢もあります。一枚の写真から細部を聞きたい場合はBe My AIを使い、「この料理名の右側にある価格と、近くの注記を読んで」と尋ねます。
確認する結果は、料理名と価格が同じ項目に対応していることです。隣の行の値段を読み上げていないか、別サイズや追加料金の注記がないかを見ます。二列のメニューで説明が混ざるなら、対象の列が分かる写真を撮り直して質問を絞ります。それでも読めない部分は、店員など元のメニューを確認できる人に尋ねてください。写真にない価格を推測して注文する必要はありません。
書類:一枚の案内から日時と会場を確かめる
イベント案内のような紙では、Lookoutの書類モードで撮影位置の案内を使い、まず紙全体を対象にします。確認したいのは、案内の表題、開催日、開始時刻、会場です。細かい文字が読めない場合は、必要な欄を写した画像を使って確認する方法もあります。Be My AIなら「開催日と受付開始時刻を分けて教えて」と、混同しやすい項目を指定できます。
表題だけ読めても、日時の確認は終わっていません。開催時刻と受付時刻、会場と問い合わせ先が区別されているかを確かめます。写真の端が欠けていたり、年が記載されていなかったりする場合は、撮り直すか発行元に確認します。年や会場を回答から推測して補わず、確認できた項目だけを後のメモに使ってください。
家庭のラベル:似た容器の正式な商品名を確かめる
見た目が似た調味料などを区別したいなら、知りたいのは容器の色だけでなく、商品名と種類を表す文字です。食品ラベルモードが自分の地域で提供され、必要なデータが準備されている場合はLookoutのそのモードを選べます。条件を満たさない場合は、対応する文字モードや写真への質問で、ラベルに書かれた情報を確認します。
Be My AIには「正面のラベルにある商品名と、種類を表す文字を読んで」と質問できます。確認する結果は、似た容器を分ける文字が含まれていることです。曲面で一部が隠れているなら、別の面を撮り、正面の写真と対応する同じ容器かを確かめます。読み取りが曖昧なままなら、人にラベルを確認してもらいます。食品ラベルの説明だけでアレルギーへの適合などを判断せず、必要な情報を別途確認してください。
入口がない時と説明が足りない時を切り分ける
機能を開けない問題と、開けた後の説明が不十分な問題では、次の手段が違います。入口がない時に何度も撮り直しても、提供条件は変わりません。逆に、写真の端が切れているだけなら、アプリの設定を広く変更する前に撮影範囲を見直せます。
| 止まった場面 | 先に確認すること | 次に選ぶ手段 |
|---|---|---|
| Guided Visionの設定が見つからない | Androidの要件、Gemini Liveの対応地域・言語、アプリとシステムの更新 | 条件を確認し、手元で利用できるLookoutの適切なモードやBe My AIの写真入力を検討する |
| カメラを使えない | 対象アプリのカメラ権限と、実際に開いている入力経路 | 必要な許可を確認する。既存画像なら、対応する画像入力・共有経路を使う |
| 画像の追加質問が表示されない | その機能の言語・地域条件 | 利用可能なモードで読み取り、足りない情報は人に確認する |
| 説明は出るが必要な文字がない | 対象が写っているか、文字の大きさ、反射、選んだモード | 撮り直し、対象を絞った質問、別の適切なモードを試す |
| 質問しても答えが食い違う | 別の物や別の行を参照していないか | 元の画像と対象を確認し、解決しなければ人の支援へ進む |
| 通信が使えない | 選んだ機能の通信条件と、事前に必要なデータの準備 | 条件を満たすオフライン機能が使えるか確認し、使えなければ作業を保留する |
Lookoutで画像の詳細説明や追加質問が使えない場合は、アプリ全体の言語対応だけを見ず、英語の詳細説明と、米国・英国・カナダの英語ユーザー向け追加質問という個別条件を確認します。モードを変えたり言語表示を変えたりすれば必ず利用できる、と考えないでください。
通信がない場面では、一部の国で追加データをダウンロード済みのLookout食品ラベルモードが選択肢になります。ただし、書類や画像の説明までオフラインで使える根拠にはなりません。Be My AIの追加質問や写真説明にはインターネット接続が必要です。必要な情報を得られなければ、接続できる場所で再開するか、その場で確認できる人に尋ねます。
Be My AIで最初の説明に不足があるなら、追加質問(Ask More)で確認したい箇所を指定し、必要なら別の写真を加えます。同じ曖昧な写真について回答を繰り返させても、それだけで裏付けは増えません。ボランティアの支援を求める場合は「どの文字や対象を確かめたいか」を伝え、Androidで利用できる実際の経路から進んでください。人の支援へ切り替える時も、確定した情報とまだ不明な情報を分けておくと、確認を続けやすくなります。
確認済みの内容を別のメモやタスクに残す
確認できた商品名や後で調べたい用事は、必要に応じて別の場所へ残します。Lookoutの最近の結果はアプリを閉じると削除されるため、永久保存された記録とは考えないでください。残したい文章を確認し、自分で保存先を選びます。読み取り結果を保存することと、元の画像を保管することも分けて考えます。
たとえば、案内の日時を確認できていないなら、「イベントの開催年を発行元に確認する」という用事を残せます。推測した開催日を確定情報として書くより、確認すべき項目が分かる文章にします。商品名や会場なども、確認できた範囲と不明な部分を混ぜずに保存してください。
私たちのFoneClawでは、ユーザーが渡した確認済みの文章を個人用メモやTo-doとして残せます。選んだ写真の内容を改めて解釈する場合は、画像に対応する互換モデルが必要です。FoneClaw内で選択したモデルが内容を理解して手順を考え、有効なAndroidツールが必要な権限と実際の承認方針に沿って保存します。日付を指定していない用事に期限を補わず、保存後に本文を確認してください。オンラインモデルには渡した画像や文脈が送られる場合があります。対応範囲はFoneClawの機能ページで確認できます。
この保存作業は、Guided Vision、Lookout、Be My Eyesからの自動取り込みではありません。FoneClawはここで比較する視覚支援の候補ではなく、確認した内容を別の個人用作業に残すための選択肢です。スマホ画面の情報と操作権限の関係を知りたい場合は、Android AI画面理解:UI状態、スクリーンショット、操作権限を安全に分ける方法で、画像を理解する段階と実行する段階の違いを確認できます。