Gemini Liveが「目の前」を声で案内――Guided Visionは、AIが人の視界を補う新しい形

Gemini Liveが「目の前」を声で案内――Guided Visionは、AIが人の視界を補う新しい形

記事
IT・テクノロジー
Googleは2026年10月1日、Gemini Liveの新機能「Guided Vision」を対応Android端末向けに提供開始しました。

カメラを共有すると、Geminiが目の前の状況を音声で説明します。ここまでは従来の画像認識の延長にも見えますが、面白いのはカメラの向きまで会話で案内する点です。「少し右へ」「下へ傾けて」「一歩下がって」と伝え、AIが答えに必要な映像を人と一緒に作ります。

視覚障害やロービジョンの人を中心に設計された機能ですが、小さな文字が読みにくい場面や、落とした物を探す場面など、日常の“ちょっと見えづらい”にも接続する発表です。

何が変わったのか

Guided Visionでは、Gemini Liveでカメラを共有すると、次の流れを音声中心で進められます。

1. 周囲や対象物をリアルタイムに説明する
2. 利用者が続けて質問する
3. 対象が映っていなければ、カメラの向きを言葉で案内する
4. 映像が整ったら、より具体的な説明を返す
diagram_01_flow.png

つまり、AIが“見えた画像を説明する”だけでなく、何を見れば答えられるかを判断し、撮影側へフィードバックするようになりました。

日常で使える場面

Googleが挙げた例は、食品ラベルや家電のダイヤル、暗い店内のメニューを読むこと、床に落としたイヤホンを探すこと、服の色や柄の組み合わせを確かめること、初めての部屋の様子を把握することです。
diagram_02_use_cases.png

開発では視覚障害者支援サービスのAiraと協力し、数万時間分の視覚解釈データを用いて訓練しました。AiraのTrusted Testerネットワークから1,000人以上が試験に参加し、安全対策の評価にも関わったとGoogleは説明しています。

ただし、これらはGoogleによる発表です。今回、筆者は実機での日本語動作や、第三者による精度比較を検証していません。

「見えるAI」だからこそ、任せてはいけない範囲もある

GoogleはGuided Visionを補助ツールと位置づけています。医療機器ではなく、白杖などの移動補助具の代替でもありません。道案内、安全な移動、障害物検知を任せる用途は想定されていません。
diagram_03_boundaries.png

この境界は重要です。便利さが増すほど「できる」と「安全に任せられる」が混ざりやすくなります。MORIの複数AI運用で使ってきた Capability ≠ Authorization ≠ Adoption が、カメラを使うAIにもそのまま当てはまります。

利用条件

Guided VisionはAndroid 9以降の対応端末で、Gemini Liveを利用できる地域・言語向けに提供されています。Geminiアプリの設定で有効化し、Gemini Liveからカメラを共有します。AndroidのアクセシビリティショートカットやTalkBackからも起動できます。

発表ページは日本を含む複数地域でのテストに触れていますが、端末・アプリ・アカウントごとの表示状況までは今回確認していません。

まとめ

・Guided Visionは2026年10月1日、対応Android端末向けに提供開始
・目の前を説明するだけでなく、対象を映すためのカメラ操作も音声で案内する
・細字の読取り、物探し、色や柄の確認、室内把握などを想定
・1,000人以上のテスターが開発・安全評価に参加したというGoogleの発表
・医療・移動・障害物検知の代替ではなく、重要場面では従来の補助手段を使う

出典

・Google, “Guided Vision in Gemini Live: built for accessibility”, 2026年10月1日  
・Google Support, “Use Guided Vision in Gemini Live” (利用方法・対応条件。2026年10月2日参照)
サービス数40万件のスキルマーケット、あなたにぴったりのサービスを探す