ElevenLabs 推出 Reader App:用逼真 AI 語音讀文章,前 3 個月免費
ElevenLabs 推出移動端 Reader App。它能把手機裡的文章、PDF、ePub 和郵件通訊轉換成高擬真的 AI 語音朗讀,支援多種音色與口音。應用已上線 iOS 和 Android,前 3 個月免費,目前僅支援英語,後續將拓展至 29 種語言。
ElevenLabs 推出移動端 Reader App。它能把手機裡的文章、PDF、ePub 和郵件通訊轉換成高擬真的 AI 語音朗讀,支援多種音色與口音。應用已上線 iOS 和 Android,前 3 個月免費,目前僅支援英語,後續將拓展至 29 種語言。
ElevenLabs 推出文本生成音效工具,所有使用者都能通過文字提示詞生成音效、短器樂片段與環境聲景。該模型基於 Shutterstock 的正版音訊庫微調而成。影視、遊戲與內容創作者以後做音效,不用再去素材庫大海撈針了。
HarperCollins 與 AI 音訊公司 ElevenLabs 達成合作,將使用其 Studio 工具為非英語業務中的長尾舊書製作有聲書。傳統錄音成本過高導致大量冷門書無法有聲化,AI 可大幅降低門檻;出版方強調主流新書仍會由專業配音員錄製,AI 僅作為補充。
ElevenLabs 宣佈與 rabbit 達成合作,將其低延遲擬真人聲模型接入隨身裝置 rabbit r1。使用者按下按鍵直接說話,就能通過自然語音操作打車、點餐等任務。高質量語音的加入,讓這臺掌上 AI 助手聽起來更像一個真人助理。
Pika 推出 Lip Sync 功能,接入 ElevenLabs 提供配音,讓影片角色的嘴型能與臺詞同步。它支援文本轉語音或上傳音訊,省去了繁瑣的後期外掛工具。不過該功能目前僅限 Pika Pro 付費使用者和受邀測試者使用。
ElevenLabs 宣佈與 Perplexity 達成合作,聯手推出每日短音訊播客《Discover Daily》。節目結合 Perplexity 的搜尋內容引擎與 ElevenLabs 的 AI 語音,自動播報科技、創新與文化最新頭條,已在各大播客平臺上線。
2 月 22 日,AI 語音初創公司 ElevenLabs 宣佈入選 2024 年迪士尼加速器計劃。團隊表示將借力迪士尼的創意資源,推進跨語言溝通技術的落地。這意味著其 AI 配音和聲音技術,正快速向全球頂級影視娛樂生態滲透。
ElevenLabs 預告即將推出 AI 音效生成功能。創作者通過文字提示詞即可直接生成定製音效、聲景與環境音,將其音訊創作能力從語音和音樂進一步擴充套件至全場景聲音設計。
ElevenLabs 宣佈多項應對 2024 年全球選舉的防護措施。平臺上線「禁克隆聲音」防護機制,優先攔截美英大選候選人的聲線克隆,並嚴禁利用 AI 語音進行冒充、打造政治聊天機器人或撥打自動騷擾電話,同時繼續提供鑑別工具以追查音訊來源。
ElevenLabs 宣佈創作者可通過 Voice Library 變現。使用者只需上傳 30 分鐘音訊建立專業聲音克隆並共享,當付費訂閱者呼叫該聲音時即可獲得現金獎勵。平臺還提供聲音所有權驗證、每日收益統計及內容稽核保護。
Perplexity 宣佈與前端開發平臺 Vercel 達成合作,開發者可通過 Vercel AI SDK 直接呼叫其即時聯網模型 pplx-7b-online 與 pplx-70b-online。模型自帶全網索引抓取,應用回答不再受知識截止期限制。Vercel 同時也上線了多模型除錯操場。
ElevenLabs 宣佈完成 8000 萬美元 B 輪融資,躋身獨角獸。公司同步推出支援整部電影翻譯與製作的 Dubbing Studio,以及允許創作者出租 AI 克隆聲音獲利的交易市場。此外,移動端朗讀應用也已開啟內測排隊。
週日晚,巴基斯坦前總理伊姆蘭·汗的政黨釋出了一段 4 分鐘的競選影片,利用 ElevenLabs 的 AI 聲音克隆技術復刻其聲音,為身在獄中的他舉行線上集會。音訊基於其親筆筆記,集會吸引超 50 萬人觀看,巴基斯坦當局隨後封鎖了主要社交平臺。
ElevenLabs 推出初創扶持計劃 ElevenLabs Grants。團隊員工少於 25 人的早期創業公司可申請為期 3 個月、每月 1100 萬字符的免費語音與配音額度,首期預計發放超 1000 億字元。扶持期結束後可享企業套餐大額折扣或隨時取消。
ElevenLabs 推出最新語音生成模型 Turbo v2。新模型將語音生成延遲縮短至約 400 毫秒,速度比初代快兩倍以上,音質仍與 Multilingual V2 持平。它還為網路電話服務新增了 mulaw 8khz 格式,多語言支援也已在路上。
ElevenLabs 推出面向企業的一體化 AI 語音平臺,拆分為 ElevenAgents 與 ElevenCreative 兩個方向。企業既能構建並部署多語言對話智慧體處理客服與排程,也能生成高擬真語音與音效,並原生打通 Salesforce 和 Zendesk 等業務系統。
ElevenLabs 宣佈與影片生成平臺 Pictory AI 達成合作。Pictory 接入 ElevenLabs 的 AI 語音技術,重點支援英語和德語,讓創作者把部落格和文本指令碼轉成影片時,能直接配上高度擬真的自然人聲。
ElevenLabs 推出 AI Dubbing 工具。它能在幾分鐘內把語音轉譯成 20 多種語言,同時保留說話者原本的音色、情緒與語調。系統還支援多人說話人分離與背景雜音過濾,創作者點幾下就能做跨語言內容分發。
ElevenLabs 推出 Projects 製作工具。使用者上傳 ePub 電子書後,系統能自動識別書中角色並匹配不同聲音,支援 90 多種語言和音效調節,幾分鐘內就能生成錄音棚級別的有聲書,大幅降低了長音訊的製作門檻。
ElevenLabs 宣佈平臺正式結束 Beta 測試,並推出語音生成模型 Eleven Multilingual v2。新模型支援中文、韓語、日文等 28 種語言,能自動識別輸入語種,並保持說話人原有的音色和口音特徵,用同一套聲音完成多語種配音。