跳至主要內容

作者

發佈日期

閱讀時間

閱讀約 4 分鐘

字體大小

分享

電郵

人工智能新訊

不是導航替代:Google Guided Vision 讓 Gemini Live 成「對話式視覺夥伴」

2026年10月1日 Google 宣布 Guided Vision 上線 Gemini Live(Android):與視障社群及 Aira 共創的對話式即時視覺協助;明確標示非醫療裝置、非白杖替代、不適用導航與障礙偵測。

圖:廚房與餐桌旁,一位使用者手持手機鏡頭對準瓶罐與標籤;半透明語音光帶與溫和的 reframing 提示弧線環繞畫面,暗示對話式視覺協助(意象插畫,無文字、無標誌,非實際介面)。
圖:廚房與餐桌旁,一位使用者手持手機鏡頭對準瓶罐與標籤;半透明語音光帶與溫和的 reframing 提示弧線環繞畫面,暗示對話式視覺協助(意象插畫,無文字、無標誌,非實際介面)。

2026 年 10 月 1 日,Google 宣布在相容的 Android 裝置上推出 Guided Vision(內建於 Gemini Live):以語音為先的即時視覺詮釋,服務盲人、低視力者,以及需要直觀視覺協助的人。產品博客由 Gemini Live 資深產品經理 Isha Sheth,以及 Google Accessibility Engineering 資深產品經理 Scott Adams 聯名發布。

這則公告的重點,不只是再加一層相機描述功能,而是把「怎麼用、用在哪、不能當什麼」寫成可核對的機制與邊界。

Guided Vision 在做什麼

根據 Google 當日博客,Guided Vision 與無障礙社群密切共創;同月稍早曾與其他 Android 無障礙工具一併預覽。目標是把 Gemini 變成對話式視覺夥伴:在 Gemini Live 期間分享相機,即可聽到對周圍環境的清楚描述、提出細緻跟進問題,並在鏡頭過高、過近或偏離時,收到主動的口語 reframing 提示——例如緩慢向右平移、向下傾斜,或往後站一步,好讓系統取得足夠清晰的視覺脈絡。

為訓練 Gemini Live 處理對話式真實場景,Google 與 Aira 合作:累積合計數萬小時的視覺詮釋數據;逾 1,000 名 Aira Trusted Tester 網絡成員協助壓力測試與日常情境 refinement;Aira 專家則以主題專家身分,直接協助建立與評估安全護欄。

圖:左側為分享相機後的環境描述迴路,中段為口語 reframing 引導鏡頭對準,右側為無障礙捷徑入口;安全邊界以淡色護欄標示「非導航/非白杖替代」(插畫,無文字、無標誌,非實際介面)。
圖:左側為分享相機後的環境描述迴路,中段為口語 reframing 引導鏡頭對準,右側為無障礙捷徑入口;安全邊界以淡色護欄標示「非導航/非白杖替代」(插畫,無文字、無標誌,非實際介面)。

日常場景怎麼用

博客列出 Guided Vision 支援的日常視覺核對場景,包括:

  • 讀細字與複雜文字:食品包裝上的小營養標籤、家電旋鈕與洗衣機行程、昏暗餐廳裡的紙本菜單;
  • 尋找與定位物件:在近旁找落地的耳機,或在擁擠的香料櫃裡找到黑胡椒;
  • 描述顏色、圖案與形狀:例如條紋上衣是否搭配某條褲子,或某件外套的顏色;
  • 探索當下環境:陌生空間、房間佈局,或桌面上物件的概覽描述;
  • 以偏好語言自然對話:多語支援反映印度、巴西、新加坡、印尼、日本等地視障與低視力社群的廣泛測試回饋,讓描述、構圖提示與回答更自然、更有幫助。

與許多無障礙創新類似,Guided Vision 也被寫成可服務長者、低識字者,或任何在弱光下需要讀細字的人。

三種快速入口

博客說明 Guided Vision 設計成盡量貼近日常、減少摩擦:

  1. Gemini App:在 Gemini 行動應用程式的個人檔案設定中開啟「Use Guided Vision in Live」,再打開 Gemini Live 並分享相機;
  2. 無障礙捷徑:Android 設定 > Accessibility > Vision assistance > Guided Vision,可配置浮動無障礙按鈕、兩指滑動手勢,或同時按兩個音量鍵啟動;
  3. TalkBack:使用 Google TalkBack 時,以三指點擊叫出 TalkBack 選單,直接選擇 Guided Vision。

必須記清的安全邊界

Google 在稿中明確寫道:與任何生成式 AI 技術一樣,Guided Vision 是輔助工具,可能出錯。它不是醫療裝置、移動輔具或白杖替代品;不適用於導航、安全出行指引或障礙偵測。使用者應繼續依賴既有的移動輔具與安全出行做法。

可得性方面:Guided Vision 現已在執行 Android 9 及以上、且 Gemini Live 受支援的地區與語言中提供;需將 Gemini App 與 Android 系統軟體更新至最新版本。

為什麼這則新訊值得記下

近一季產業討論大量集中在模型基準、企業代理與人才學院。Guided Vision 把鏡頭轉向另一條同樣關鍵的日常約束:視覺資訊如何以對話方式即時進入語音迴路,同時把「能做什麼」與「不能當導航/白杖」寫進同一則產品說明。

就目前可核對的一級材料而言,可記下的是上線範圍、Aira 共創與測試規模、日常用例、三種入口路徑,以及安全免責的原文邊界。更廣的地區/語言清單與長期實測成效,仍有待後續官方更新。


主要來源:

  • Google,〈Guided Vision in Gemini Live: built for accessibility〉,2026-10-01,https://blog.google/innovation-and-ai/products/gemini-app/guided-vision-gemini-live/(稿中具名合作方 Aira)

來源: https://blog.google/innovation-and-ai/products/gemini-app/guided-vision-gemini-live/

發表留言

發佈留言必須填寫的電子郵件地址不會公開。 必填欄位標示為 *

FFOO Labs 通訊

不定期分享關於 AI、科技,以及想像與實踐之間種種思考的筆記。

透過 RSS 追蹤