AIエージェント導入・運用

Gemini LiveのGuided Visionを試す。カメラ共有と安全確認を分ける

公開日 ・更新日

カメラを共有すれば説明が返る。でも、それだけで安全が保証されるわけではありません。Googleは、盲ろう者・弱視者のコミュニティと開発したGuided Visionを、対応するAndroidのGemini Liveへ展開しました。周囲の説明、追加質問、カメラの向きを直す音声の案内を、会話の中で受け取る機能です。

Guided Visionは支援機能です。生成AIは誤ることがあり、医療機器、白杖、移動支援、ナビゲーションの代替ではないとGoogleは明記しています。試すときは、便利さと安全境界を同じ手順に置きます。

共有する前に目的を一つにする

最初に、カメラで確認したい対象を一つに決めます。物の場所、料理の手順、細かい文字など、質問と終点が説明できる場面から始める。周囲の人や書類が映り込む場合は、本人の同意と情報の扱いを先に確認します。

AndroidのGemini Liveでカメラを共有すると、Guided Visionは状況を音声で説明し、必要なら詳しい質問を受け付けます。入力する映像を必要な範囲にとどめ、確認が終わったら共有を止める。この切り替えを担当者が迷わない形にしておきます。

構図を直す声かけを使う

カメラが高すぎる、近すぎる、横にずれている。そんなとき、Guided Visionはゆっくり右へ動かす、下へ傾ける、少し離れるといった音声の手がかりを返します。説明を聞いて終わりにせず、対象が正しく映ったかを人が確認します。

Googleは、AiraのTrusted Testerネットワークなど、盲ろう者・弱視者の協力を得て開発と評価を進めたと説明しています。実際の利用でも、説明の分かりやすさ、聞き直し、誤りを記録し、支援する人へ共有できる状態にします。

危険な判断を任せない

Guided Visionは、移動経路、障害物の有無、健康状態を確定するための道具ではありません。危険がある場所で画面の説明だけを頼りに歩かない。医療や安全に関わる判断は、既存の支援手段と専門家へ戻します。

対応端末はAndroid 9以降で、Gemini Liveが使える地域と言語が前提です。アプリとシステムを更新し、アクセシビリティ設定からショートカットを登録して、必要なときに呼び出せるかを確認します。

支援の品質を同じ表で見る

説明の正確さだけでなく、確認にかかった時間、聞き直し、誤った説明、共有を止められたかを記録します。支援機能を導入するときは、利用回数を増やすより、戻れる手順が続くかを見ることが大切なんです。

出典(公式):Google「Guided Vision in Gemini Live: built for accessibility」 https://blog.google/innovation-and-ai/products/gemini-app/guided-vision-gemini-live/

AIをアクセシビリティ支援へ組み込み、同意・確認・停止の手順まで整えたい方は、COZITOへご相談ください。

出典・参考資料

著者: 松井 勇樹