ElevenLabs 推出 Reader App:用逼真 AI 语音读文章,前 3 个月免费
ElevenLabs 推出移动端 Reader App。它能把手机里的文章、PDF、ePub 和邮件通讯转换成高拟真的 AI 语音朗读,支持多种音色与口音。应用已上线 iOS 和 Android,前 3 个月免费,目前仅支持英语,后续将拓展至 29 种语言。
ElevenLabs 推出移动端 Reader App。它能把手机里的文章、PDF、ePub 和邮件通讯转换成高拟真的 AI 语音朗读,支持多种音色与口音。应用已上线 iOS 和 Android,前 3 个月免费,目前仅支持英语,后续将拓展至 29 种语言。
ElevenLabs 推出文本生成音效工具,所有用户都能通过文字提示词生成音效、短器乐片段与环境声景。该模型基于 Shutterstock 的正版音频库微调而成。影视、游戏与内容创作者以后做音效,不用再去素材库大海捞针了。
HarperCollins 与 AI 音频公司 ElevenLabs 达成合作,将使用其 Studio 工具为非英语业务中的长尾旧书制作有声书。传统录音成本过高导致大量冷门书无法有声化,AI 可大幅降低门槛;出版方强调主流新书仍会由专业配音员录制,AI 仅作为补充。
ElevenLabs 宣布与 rabbit 达成合作,将其低延迟拟真人声模型接入随身设备 rabbit r1。用户按下按键直接说话,就能通过自然语音操作打车、点餐等任务。高质量语音的加入,让这台掌上 AI 助手听起来更像一个真人助理。
Pika 推出 Lip Sync 功能,接入 ElevenLabs 提供配音,让视频角色的嘴型能与台词同步。它支持文本转语音或上传音频,省去了繁琐的后期外挂工具。不过该功能目前仅限 Pika Pro 付费用户和受邀测试者使用。
ElevenLabs 宣布与 Perplexity 达成合作,联手推出每日短音频播客《Discover Daily》。节目结合 Perplexity 的搜索内容引擎与 ElevenLabs 的 AI 语音,自动播报科技、创新与文化最新头条,已在各大播客平台上线。
2 月 22 日,AI 语音初创公司 ElevenLabs 宣布入选 2024 年迪士尼加速器计划。团队表示将借力迪士尼的创意资源,推进跨语言沟通技术的落地。这意味着其 AI 配音和声音技术,正快速向全球顶级影视娱乐生态渗透。
ElevenLabs 预告即将推出 AI 音效生成功能。创作者通过文字提示词即可直接生成定制音效、声景与环境音,将其音频创作能力从语音和音乐进一步扩展至全场景声音设计。
ElevenLabs 宣布多项应对 2024 年全球选举的防护措施。平台上线「禁克隆声音」防护机制,优先拦截美英大选候选人的声线克隆,并严禁利用 AI 语音进行冒充、打造政治聊天机器人或拨打自动骚扰电话,同时继续提供鉴别工具以追查音频来源。
ElevenLabs 宣布创作者可通过 Voice Library 变现。用户只需上传 30 分钟音频创建专业声音克隆并共享,当付费订阅者调用该声音时即可获得现金奖励。平台还提供声音所有权验证、每日收益统计及内容审核保护。
Perplexity 宣布与前端开发平台 Vercel 达成合作,开发者可通过 Vercel AI SDK 直接调用其实时联网模型 pplx-7b-online 与 pplx-70b-online。模型自带全网索引抓取,应用回答不再受知识截止期限制。Vercel 同时也上线了多模型调试操场。
ElevenLabs 宣布完成 8000 万美元 B 轮融资,跻身独角兽。公司同步推出支持整部电影翻译与制作的 Dubbing Studio,以及允许创作者出租 AI 克隆声音获利的交易市场。此外,移动端朗读应用也已开启内测排队。
周日晚,巴基斯坦前总理伊姆兰·汗的政党发布了一段 4 分钟的竞选视频,利用 ElevenLabs 的 AI 声音克隆技术复刻其声音,为身在狱中的他举行线上集会。音频基于其亲笔笔记,集会吸引超 50 万人观看,巴基斯坦当局随后封锁了主要社交平台。
ElevenLabs 推出初创扶持计划 ElevenLabs Grants。团队员工少于 25 人的早期创业公司可申请为期 3 个月、每月 1100 万字符的免费语音与配音额度,首期预计发放超 1000 亿字符。扶持期结束后可享企业套餐大额折扣或随时取消。
ElevenLabs 推出最新语音生成模型 Turbo v2。新模型将语音生成延迟缩短至约 400 毫秒,速度比初代快两倍以上,音质仍与 Multilingual V2 持平。它还为网络电话服务新增了 mulaw 8khz 格式,多语言支持也已在路上。
ElevenLabs 推出面向企业的一体化 AI 语音平台,拆分为 ElevenAgents 与 ElevenCreative 两个方向。企业既能构建并部署多语言对话智能体处理客服与调度,也能生成高拟真语音与音效,并原生打通 Salesforce 和 Zendesk 等业务系统。
ElevenLabs 宣布与视频生成平台 Pictory AI 达成合作。Pictory 接入 ElevenLabs 的 AI 语音技术,重点支持英语和德语,让创作者把博客和文本脚本转成视频时,能直接配上高度拟真的自然人声。
ElevenLabs 推出 AI Dubbing 工具。它能在几分钟内把语音转译成 20 多种语言,同时保留说话者原本的音色、情绪与语调。系统还支持多人说话人分离与背景杂音过滤,创作者点几下就能做跨语言内容分发。
ElevenLabs 推出 Projects 制作工具。用户上传 ePub 电子书后,系统能自动识别书中角色并匹配不同声音,支持 90 多种语言和音效调节,几分钟内就能生成录音棚级别的有声书,大幅降低了长音频的制作门槛。
ElevenLabs 宣布平台正式结束 Beta 测试,并推出语音生成模型 Eleven Multilingual v2。新模型支持中文、韩语、日文等 28 种语言,能自动识别输入语种,并保持说话人原有的音色和口音特征,用同一套声音完成多语种配音。