Gemini Live 推出 Guided Vision:用語音讀懂鏡頭畫面,為視覺協助設計
Google 在 Android 的 Gemini Live 推出 Guided Vision,可用語音描述鏡頭畫面、讀文字與提示調整取景。本文整理使用入口、支援條件,以及它不能取代行動輔具的原因。
Google 在 2026 年 10 月 1 日宣布,Guided Vision 開始提供給相容的 Android 裝置。這是 Gemini Live 裡的即時視覺協助功能,讓使用者分享鏡頭畫面,再聽取環境描述、追問細節,並依語音提示調整取景。
功能和視障及低視力社群共同開發,也適合需要看清小字或昏暗環境中內容的人。它值得關注的地方,是把「AI 看圖回答」整理成更適合日常語音互動的流程。

不只回答,也提示鏡頭怎麼調整
一般視覺問答需要使用者先提供清楚的圖片。對看不清螢幕的人來說,最困難的地方可能正是確認鏡頭有沒有拍到目標。
Google 官方介紹說明,Guided Vision 會在畫面太高、太近或偏向一邊時,提供自然的語音提示,幫助使用者移動或調整鏡頭,取得回答問題需要的視覺資訊。
這把互動變成一個來回過程:先看畫面、說明需要什麼、調整後再詢問。本文整理官方描述,沒有在實機驗證特定物品的辨識率。
官方列出哪些日常用途?
Google 提到讀食品包裝上的小字、家電旋鈕與菜單,也包括找附近物品、描述顏色和花紋,以及了解房間或桌面的配置。
例如,使用者想知道一件衣服的顏色,可以把鏡頭對準衣服,再追問花紋。這類用途的重點是讓資訊變得容易取得,但回答仍可能受到取景、光線與辨識錯誤影響。
對需要精確核對的內容,我會把語音描述當成輔助資訊。若數字、名稱或標示會影響重要決定,仍需要適合情境的可靠核對方式,不能只因語氣自然就認定內容正確。
與社群一起測試,是設計的一部分
Google 表示,與 Aira 合作處理數萬小時的視覺描述資料,並有超過 1,000 位 Aira Trusted Tester 成員參與日常情境測試。Aira 專家也協助建立與評估產品的使用界線。
這些是官方公布的開發背景,不是所有使用情境都能準確完成的保證。視覺協助的難度在於,同一個問題可能因鏡頭位置與周圍物品不同,而需要不一樣的引導。
我認為持續的社群測試很重要。真正好用的功能不只要認出畫面,也要讓人聽得懂下一步怎麼做,並在資訊不足時避免讓使用者誤以為已經確認。
Android 使用者怎麼開啟?
依官方說明,可以在 Gemini 行動應用程式的個人設定中,開啟「Use Guided Vision in Live」,接著進入 Gemini Live 並分享鏡頭。
Android 的無障礙設定也提供快捷啟動方式;使用 TalkBack 的人,可以從 TalkBack 選單開啟 Guided Vision。TalkBack 是 Android 的螢幕朗讀工具。
Google 列出的基本條件是 Android 9 或以上,且所在地區與語言支援 Gemini Live,並更新 Gemini 應用程式與系統軟體。實際選單文字和出現時間可能因版本不同,本文不把 Android 公告外推為 iPhone 已同步支援。
不是導航或障礙偵測工具
官方明確說明,Guided Vision 可能犯錯,不是醫療設備、行動輔具或白手杖替代品,也不以導航、安全行走引導或障礙偵測為用途。
這個界線直接影響怎麼使用。讀懂桌面上的物品,和判斷一條路能不能安全行走,是不同要求;影片或鏡頭描述看起來流暢,也不能把它當成安全行動的保證。
使用者仍應依賴既有行動輔具與安全移動方式。這是 Google 對功能用途的明確說明,也是理解這則新聞時需要保留的重點。
常見問題
只有視障使用者可以使用嗎?
官方也提到低光環境讀小字等較廣泛的視覺協助情境,但功能設計與視障及低視力社群密切合作。
需要分享鏡頭嗎?
Guided Vision 的即時協助流程需要在 Gemini Live 中分享鏡頭,讓模型取得視覺資訊。
可以拿它帶路嗎?
官方不把它定位為導航、安全行走或障礙偵測工具,也不能取代白手杖等輔具。
結語:把視覺資訊變成可以追問的對話
Guided Vision 的更新把畫面描述、追問與取景提示串連起來。對需要語音取得視覺資訊的人,這種互動設計有實際意義。
我會從固定位置的小物品與文字開始理解功能,再留意系統是否取得足夠畫面。讓協助更方便與保留可靠的行動支持,需要同時做到。