스포티파이, 일레븐랩스와 협력해 AI 낭독 오디오북 배포 확대
스포티파이가 일레븐랩스와 제휴해 AI 음성 소프트웨어로 제작된 오디오북 입점을 허용한다고 발표했다. 작가들은 29개 언어의 합성 음성으로 제작비를 아끼고 묻혀 있던 구작을 오디오북으로 살릴 수 있다. AI 낭독 작품에는 명확한 표기가 붙고 사전 심사를 거치게 된다.
스포티파이가 일레븐랩스와 제휴해 AI 음성 소프트웨어로 제작된 오디오북 입점을 허용한다고 발표했다. 작가들은 29개 언어의 합성 음성으로 제작비를 아끼고 묻혀 있던 구작을 오디오북으로 살릴 수 있다. AI 낭독 작품에는 명확한 표기가 붙고 사전 심사를 거치게 된다.
타임(TIME)이 일레븐랩스 및 스케일 AI와 손잡고 'TIME AI'를 선보였다. 독자는 기사를 읽으며 AI 음성 에이전트와 실시간 대화를 나누고 질문할 수 있으며, 요약과 번역 기능도 지원된다. 현재 최근 4년간의 '올해의 인물' 기사에서 바로 써볼 수 있다.
ElevenLabs가 Mistral, Perplexity, Hugging Face 등과 협력해 'AI Engineer Pack'을 선보였습니다. 참여 플랫폼마다 각각 50달러 이상의 API 크레딧을 지원해, 개발자들이 새 프로젝트를 시험할 때 발생하는 초기 API 비용 부담을 덜어줍니다.
일레븐랩스가 장문 오디오 편집 도구인 Studio에 GenFM 기능을 추가했습니다. PDF나 기사 링크를 넣으면 두 명의 사실적인 AI 호스트가 대화하는 팟캐스트가 자동 생성됩니다. 총 32개 언어를 지원하며 대본 수정과 상업적 음원 추출도 가능합니다.
ElevenLabs가 맞춤형 대화형 음성 에이전트를 개발할 수 있는 통합 플랫폼 ‘Conversational AI’를 출시했다. 텍스트 음성 변환, 음성 인식, 외부 LLM을 연동하며 실시간 끼어들기 및 대화 턴테이킹을 매끄럽게 처리한다. Twilio 연동과 다양한 SDK도 지원한다.
일레븐랩스가 iOS용 'ElevenReader' 앱에 텍스트 기반 팟캐스트 생성 기능 'GenFM'을 추가했다. PDF나 기사, 전자책을 가져오면 AI 진행자 간의 대화형 팟캐스트를 32개 언어로 몇 초 만에 제작해 준다. 안드로이드 버전도 수 주 내 출시될 예정이다.
일레븐랩스는 개발자 플랫폼에서 대화형 AI 에이전트를 직접 구축할 수 있는 기능을 출시했다. 음성 톤과 지식 베이스를 맞춤 설정할 수 있으며, 제미나이·GPT·클로드 등 선호하는 LLM을 연결할 수 있다. 음성 생성을 넘어 실시간 대화형 AI 시장에 본격 진출했다.
일레븐랩스는 오디오 제작 플랫폼 원더크래프트와의 협력을 발표했다. 구글 노트북LM으로 생성한 팟캐스트를 불러와 일레븐랩스의 맞춤형 복제 음성과 표현력 제어 기능을 통해 손쉽게 재편집할 수 있으며, 출시 첫 주에만 1만 명 이상의 사용자를 확보했다.
CreatorKit과 ElevenLabs가 감정 표현이 가능한 'Emotive AI Actors'를 선보였다. 스크립트에 맞춰 흥분이나 호기심 등 억양을 살리는 음성 복제 기술을 적용했다. 감정을 담은 목소리를 적용한 뒤 동영상 광고 전환율이 16% 올랐다고 밝혔다.
ElevenLabs가 장문 텍스트 음성 변환 도구인 Studio를 개편했다. 특정 단어나 문장만 골라 다시 생성해 크레딧 낭비를 줄일 수 있으며, 완료된 문단 잠금 기능과 한 문단 내 여러 음성 교차 배치 기능도 추가됐다. 오디오북이나 긴 대본의 오디오 편집 비용이 크게 줄어들 전망이다.
일레븐랩스가 그레이트풀 데드의 제리 가르시아 유산 재단과 협력해 그의 AI 음성을 일레븐리더 앱에 선보였다. 32개 언어로 전자책, 기사, PDF 등을 낭독할 수 있다. 현재는 텍스트 읽기 기능만 지원하며, 향후 다큐멘터리 내레이션 등 다양한 프로젝트에도 활용될 예정이다.
TechCrunch Disrupt 행사에서 AI 안전 전문가들이 스타트업 창업자들에게 무리한 출시 속도를 늦출 것을 당부했다. 최근 발생한 Character.AI 소송과 저작권 침해 우려 등을 지적하며, 배포 전 철저한 레드팀 테스트와 안전장치 마련이 필수적이라고 강조했다.
일레븐랩스가 지난주 Voice Design API와 함께 오픈소스 프로젝트 'X to Voice'를 공개했다. X 사용자 아이디를 입력하면 프로필 소개와 게시글을 분석해 맞춤형 프롬프트와 3가지 음성 샘플을 생성하며, 프로필 사진의 립싱크 영상도 함께 만들어 준다.
일레븐랩스는 오픈소스 읽기 앱 옴니보어(Omnivore) 팀이 합류했다고 밝혔습니다. 옴니보어 팀은 지난 6월 출시되어 32개 언어를 지원하는 음성 낭독 앱 일레븐리더(ElevenReader)의 모바일 기능 확장을 도울 예정입니다. 기존 옴니보어의 코드베이스는 계속 오픈소스로 유지됩니다.
일레븐랩스가 세계적인 건강 분야 작가 디팩 초프라와 제휴해 그의 합성 음성을 낭독 라이브러리에 도입했다. 사용자는 초프라의 차분한 목소리로 책이나 기사를 들을 수 있다. 라이선스 보호를 위해 해당 음성으로 새로운 창작물을 임의 제작하는 기능은 제한된다.
일레븐랩스는 텍스트 음성 변환 앱 '리더(Reader)'를 전 세계에 출시하며 한국어를 포함한 32개 언어를 지원하기 시작했다. 기사나 PDF, 전자책을 수백 가지 음성으로 읽어주며, 터보 v2.5 모델을 기반으로 구동된다. 추후 오프라인 지원도 추가될 예정이다.
엔비디아가 SIGGRAPH에서 대화형 디지털 휴먼 '제임스(James)'와 Maxine 3D를 공개했다. 제임스는 엔비디아 ACE와 일레븐랩스 음성 기술을 바탕으로 유머와 감정을 섞어 실시간으로 대화한다. 일반 2D 인물 영상을 3D 아바타로 변환해 화상회의에 쓰는 Maxine 3D도 함께 선보였다.
일레븐랩스가 음성 분리 도구 '보이스 아이솔레이터'를 선보였다. 딥러닝 모델을 활용해 복잡한 주변 소음, 겹치는 대화 소리, 음악을 걷어내고 목소리만 깨끗하게 추출한다. 웹 브라우저에서 바로 쓸 수 있으며 매월 1만 크레딧이 제공된다.
ElevenLabs는 유산 관리 기관과 협력해 리더 앱에 주디 갈랜드, 제임스 딘 등 유명 고인의 AI 음성을 추가했다. 갈랜드의 목소리로 『오즈의 마법사』를 듣거나 로런스 올리비에의 낭독을 들을 수 있다. 다만 이 음성들은 앱 내 개인 스트리밍 청취 전용이며 제작물 생성 및 외부 반출은 제한된다.
타임(TIME)은 일레븐랩스의 임베드 오디오 플레이어 'Audio Native'를 공식 웹사이트 일부 기사에 도입했다고 발표했다. 2023년 3월부터 이어진 양사의 협업 결과물로, 독자들은 텍스트 기사를 고품질 AI 음성으로 들을 수 있게 됐다.