跳到正文
IFAI

AI工具

Google 更新 Pixel 與 Android 無障礙功能:AI 找字、摺疊屏雙面字幕

首次發布 傳播指數 36

Google 為 Pixel 和 Android 推出 4 項無障礙更新。Pixel 相機引導構圖現可直接開啟並改進主體識別;放大鏡支援 AI 搜尋現實環境中的文字;摺疊屏裝置新增即時轉錄雙屏模式,支援同桌人雙向看字幕;即時字幕與端側轉錄則新增中文等 7 種語言。

Google 更新 Pixel 與 Android 無障礙功能:AI 找字、摺疊屏雙面字幕
圖:blog.google

拍照對普通人來說就是抬手一按的事,但如果你看不清螢幕,怎麼知道自己有沒有出畫、對焦準不準、光線夠不夠?

Google 最近給 Pixel 和 Android 帶來了一批針對無障礙功能的 AI 更新。這次更新重點照顧了視障和聽障群體的真實日常,把拍照、看選單和麵對面聊天這幾件最瑣碎的事重新打磨了一遍。

拍照靠嘴指揮,找文字像用 Ctrl+F

首先是 Pixel 相機裡的「引導取景」(Guided Frame)。這項功能本來是專門幫盲人和弱視使用者拍照的,這次升級後不僅能識別物體、在多人合照裡過濾人臉,還能直接用語音告訴你把頭抬高一點、鏡頭往左偏一點,甚至還會提醒你當前光線太暗。只要姿勢擺對了,它就會自動按下快門。

更方便的是,以前這功能必須開著 TalkBack 螢幕閱讀器才能用,現在 Google 把它直接做進了相機設定裡,隨手就能開啟。

Pixel 5 及以上機型專屬的「放大鏡」(Magnifier)應用也變得更聰明了。現在它不僅能放大畫面,還能像在現實世界裡用搜索鍵一樣,幫你找周圍的特定單詞。比如在機場找登機牌上的航班號,或者在密密麻麻的選單裡搜素食,直接輸入關鍵詞就能標出來。

放大鏡還加入了畫中畫模式,讓你一邊看整體佈局一邊看區域性小字,並且支援手動切微距或廣角鏡頭,甚至能開啟前置鏡頭補光當化妝鏡用。

摺疊屏雙面顯示,離線支援中文轉寫

針對聽障朋友常用的「即時轉寫」(Live Transcribe),Google 想到了摺疊屏的新用法。

類似 Pixel 9 Pro Fold 這樣的摺疊屏手機,現在只要折成半開狀態立在桌上,內外兩塊螢幕就能同時顯示即時轉寫的文字。這樣大家圍坐在會議桌或者餐桌旁聊天時,對面的人也能即時看見螢幕上的對話內容,不用把手機轉來轉去遞著看。

另外在語言方面,系統級的「即時字幕」(Live Caption)新增了中文、韓語、波蘭語、葡萄牙語、俄語、土耳其語和越南語。

這七種新語言也同步加入了即時轉寫的端側離線包。這意味著在坐地鐵、坐飛機或者完全沒網的情況下,支援離線轉寫的語言增加到了 15 種,聯網狀態下則繼續支援超過 120 種語言。

為什麼重要

無障礙功能往往是科技巨頭最容易拿來當門面的地方,但 Google 這次拿出來的東西很具體,解決的不是宏大的空話,而是現實世界裡極小的摩擦點。

把環境文字搜尋做進放大鏡,對低視力群體來說實用性極高。過去弱視使用者可能需要把手機貼在指示牌前一點一點挪著看,現在有了文字檢索和畫中畫,找資訊的效率完全不在一個量級。而把引導取景從無障礙專用的 TalkBack 拆出來放進系統相機設定,看起來是個小改動,實際上打破了殘障工具和普通工具之間的界限,哪怕只是眼睛有些老花的長輩也能直接受益。

摺疊屏的雙屏轉寫也是個非常聰明的巧思。摺疊屏問世這幾年,很多廠商都在想怎麼用大屏做多工或者玩遊戲,但 Google 把它做成了促進面對面溝通的無障礙看板。這種基於硬體形態自然延伸出的軟體功能,比單純堆硬體引數更能體現產品的同理心。

當然,這些功能目前最大的門檻依然是機型限制。好用的功能大多綁在 Pixel 甚至新款摺疊屏上,普通 Android 手機暫時享受不到全套體驗。我們認為,Google 如果能逐步把端側的影像檢索與視覺引導下放到更廣泛的 Android 生態裡,才能真正讓這些好技術變成人人都用得起的標配。

來源 (1)

  1. [1]
    blog.google(在新分頁開啟)原文blog.google

每日 AI 內容精選