跳到正文
IFAI

AI工具

Chromebook 上線面部控制:靠 18 種表情手勢直接操控游標

首次發布 傳播指數 36

Google 介紹了 Chromebook 新增的 Face control 無障礙功能。它利用機器學習追蹤 478 個面部特徵點,能識別人臉動作和多達 18 種表情手勢來移動游標、完成點選等操作。該功能目前已在 ChromeOS 測試版上線,預計明年初向全部使用者推出。

Chromebook 上線面部控制:靠 18 種表情手勢直接操控游標
圖:blog.google

如果你曾經因為手腕痠痛抬不起手,或者只是在做飯時滿手面粉想切個歌,大概能體會到不用手操作螢幕有多方便。

但對全球許多運動障礙人士來說,能不能不用雙手點滑鼠,直接決定了他們能不能獨立用電腦。

在 12 月 3 日國際殘疾人日當天,Google 正式介紹了 ChromeOS 上的新無障礙功能 Face control。說白了,它就是讓使用者不用鍵盤和滑鼠,單靠轉轉頭、做做面部表情,就能完整操控 Chromebook。

抓取 478 個面部點位,讀懂 18 種表情

這套功能的核心是一套機器學習模型,利用普通的攝像頭,就能在使用者臉上即時構建出包含 478 個特徵點的三維網格。

使用者的頭部輕微晃動,系統就會把動作對映為滑鼠指標的移動。

真正用來觸發點選、拖拽等操作的,則是面部表情。Google 透露,專案最初只設計了少數幾個動作,但在殘障群體的實際測試反饋下,團隊最終將可識別的表情擴充套件到了 18 種。

挑挑眉毛、張張嘴或者微笑,都能繫結成不同的快捷指令。它還能配合 Chromebook 原本自帶的自動點選、ChromeVox 螢幕朗讀以及語音聽寫,拼成一套完全脫離雙手的操作流程。

這項技術的雛形來自 Google 之前的開源專案 Project GameFace,當時是為了幫助患有肌營養不良症的遊戲玩家 Lance Carr 玩遊戲而開發的,如今這項技術被直接搬進了作業系統底層。

目前 Face control 已經在 ChromeOS Beta 測試版中上線,預計明年初向所有使用者正式推送。不過 Google 提到,為了保證順暢體驗,裝置最好配備至少 8GB 記憶體。

為什麼重要

我們認為,Google 這次做的事情最聰明的地方在於,它把昂貴且小眾的輔助技術,做成了普通平價筆記本里的出廠標配。

以往行動不便的人群想要用頭部控制游標,往往需要購買昂貴的專用眼動儀或特殊的紅外外設,不僅價格高昂,配置起來也極度繁瑣。現在只要一臺普通的 Chromebook 和前置攝像頭,就能解決最基本的互動門檻。

尤其是在教育市場,全球每天有 5000 萬師生在使用 Chromebook。身體有障礙的學生不需要在一旁使用特殊裝置,而是能和身邊的同學拿著一模一樣的電腦,一起寫作業、翻幻燈片,這種心理上的平等感同樣很重要。

不過隱患也並非沒有。8GB 記憶體的推薦配置,直接把市面上很多低配、入門級的 Chromebook 擋在了門外,而那些裝置恰恰是很多低預算學校和家庭最常買的。如何把模型進一步輕量化,讓 4GB 記憶體的機器也能流暢執行,會是 Google 接下來的真正考驗。

來源 (1)

  1. [1]
    blog.google(在新分頁開啟)原文blog.google

話題追蹤Chromebook 面部表情控制功能

這個話題的歷次新聞,最新的在上面。

  1. Google 拓展 Chromebook 新功能:動動臉和頭就能當滑鼠用
  2. Chromebook 上線面部控制:靠 18 種表情手勢直接操控游標本則

每日 AI 內容精選