跳到正文
IFAI

AI工具

Oculus創始人再創業做Sesame:擬真語音叫板主流助手,還要造AI眼鏡

首次發布 傳播指數 50

Oculus 前 CEO 創辦的 Sesame 結束隱身狀態,公佈極具擬真表現力的語音技術並開放體驗,同時宣佈正在研發全天候陪伴的 AI 眼鏡。該模型支援自然打斷與流暢互動,官方計劃在未來數月開源並支援 20 多種語言。

Oculus創始人再創業做Sesame:擬真語音叫板主流助手,還要造AI眼鏡
圖:theverge.com

大部分人面對現在的語音助手,日常狀態基本就是讓 Alexa 閉嘴,或者被 Siri 的卡頓和智障回答勸退。大家寧可打字,也不願對著空氣多說兩句。

初創公司 Sesame 結束隱身狀態,公佈了自家的擬真語音技術。更引人注意的是帶頭人:前 Oculus 聯合創始人兼 CEO Brendan Iribe。當年把虛擬現實裝置做出來並賣給 Facebook 的原班核心團隊,這次要給 AI 語音換上一副智慧眼鏡。

隨時打斷、會嘆氣的 AI 聲音

Sesame 這次放出了一個網頁版聲音 Demo,包含名為 Maya 等兩個音色。

在科技媒體 The Verge 記者的實際試聽中,最明顯的特點是自然停頓與極低的打斷門檻。記者讓它現場構思跑團冒險故事,並在中間隨時插話,要求 Maya 把自己也編進故事裡。

對方毫無卡頓地接上了話,直接把自己編成了一個搭建致命陷阱防禦獸人的侏儒工程師。這種毫無機械感的呼吸節律和插話反應,被評價為比去年的 ChatGPT 高階語音模式更讓人想一直聊下去。

技術層面上,Sesame 釋出了一份迷你白皮書。這套模型基於約 100 萬小時的公開音訊資料訓練而成。官方聲稱,未來幾個月內將模型開源,並把支援語言從目前的英語擴充套件到 20 多種。

豪華硬體老兵,目標是全天佩戴的 AI 眼鏡

Sesame 並不打算只做一家賣模型介面的軟體公司。它的核心目標是製造能夠全天佩戴的 AI 伴侶眼鏡。

眼鏡的設計定位是提供高質量音訊,讓 AI 能夠陪伴在耳邊,同時觀察現實世界。從目前放出的幾張早期原型圖來看,裝置還在較早期的階段。

但這家公司的背景極具分量。除了 Brendan Iribe 掛帥之外,聯合創始人還包括前 Ubiquity6 聯合創始人兼 CTO Ankit Kumar,以及前 Meta Reality Labs 研究工程總監 Ryan Brown。

投資方名單也是當年 Oculus 的老班底,包括 Andreessen Horowitz、Spark Capital 和 Matrix Partners,融資金額尚未對外公開。

為什麼重要

對普通使用者來說,現在的語音助手本質上還是工具:定鬧鐘、放歌、查天氣。我們認為,Sesame 試圖解決的是人機語音互動裡最根本的心理阻礙——尷尬感與等待成本。只要機器的停頓、音調有一絲機械味,人就會退回打字。如果它真能做到順暢插話與自然接梗,全天候語音陪伴才真正有了日常可用的可能。目前任何人都可以直接去官方網站試聽 Demo,感受一下它宣稱的跨越語音恐怖谷。

對行業而言,Meta 與 Ray-Ban 的智慧眼鏡已經在市場上驗證了隨身硬體的可行性。Sesame 這一步棋下得非常聰明:它沒有先憋大招做笨重的 AR 顯示眼鏡,而是直接做純音訊加環境感知的輕量級眼鏡,把計算重心押在對話智慧上。

隱患也顯而易見。100 萬小時公開音訊訓練出來的模型,其版權和資料合規在未來開源時可能會面臨拷問;另一方面,硬體從原型走向量產極為燒錢,哪怕是 Oculus 創始團隊,在全天續航、發熱與外觀之間找到平衡也是極大的考驗。但無論如何,能讓巨頭元老殺回硬體戰場,說明語音伴侶的新賽道已經打響了。

來源 (2)

  1. [1]
    @sesame(在新分頁開啟)原文twitter.com
  2. [2]
    theverge.com(在新分頁開啟)報導theverge.com

每日 AI 內容精選