일레븐랩스, 전문 성우 협업한 신규 기본 AI 음성 공개
일레븐랩스가 음성 합성 및 프로젝트 알파 플랫폼에 새로운 기본 음성을 출시했다. 전문 성우와 협력해 30분 분량의 녹음을 기반으로 한 전문 음성 복제 기술을 적용했으며, 아일랜드·이탈리아 등 다양한 억양과 감정 표현을 지원한다. 일레븐랩스는 저작권을 소유하지 않고 라이선스 방식을 취하며, 생성 건당 수익을 배분하는 보상 모델도 테스트 중이다.
일레븐랩스가 음성 합성 및 프로젝트 알파 플랫폼에 새로운 기본 음성을 출시했다. 전문 성우와 협력해 30분 분량의 녹음을 기반으로 한 전문 음성 복제 기술을 적용했으며, 아일랜드·이탈리아 등 다양한 억양과 감정 표현을 지원한다. 일레븐랩스는 저작권을 소유하지 않고 라이선스 방식을 취하며, 생성 건당 수익을 배분하는 보상 모델도 테스트 중이다.
일레븐랩스가 음성과 영상 제작 파이프라인을 묶은 신규 플랫폼 'Chimera'를 공개했습니다. 기존의 정교한 음성 복제 및 더빙 기능에 Seedance 등 비디오 생성 도구를 결합해, 앱 내에서 완성형 AI 미디어 워크플로를 구축할 수 있습니다.
일레븐랩스가 업로드한 영상에 맞춰 오리지널 음악과 싱크된 효과음을 자동으로 생성하는 'Instant Soundtracks'를 공개했다. 영상 장면을 분석해 정확한 타임스탬프에 효과음을 배치하며, 기존 오디오를 참조한 생성과 트랙별 분리 편집도 지원한다. 현재 ElevenCreative 및 API를 통해 제공된다.
일레븐랩스가 표현력을 높인 음성 합성 모델 'Eleven v4'와 'Eleven v4 Turbo'를 출시했다. 텍스트 내 태그로 감정과 효과음을 정밀하게 조절할 수 있고 10초 분량 오디오로 음성을 복제한다. 90개 이상 언어를 지원하며 약 100ms의 추론 지연 시간으로 실시간 대화 에이전트에 최적화했다.
일레븐랩스가 대학생 대상의 'ElevenLabs for Students'를 발표했다. 미국, 캐나다, 영국, 호주 및 EU 27개국의 만 18세 이상 대학생에게 ElevenCreative, ElevenAgents, API 3개월 무료 이용권과 ElevenReader Ultra 1년 이용권을 제공한다. 학생들의 연구 및 프로젝트 개발을 돕기 위한 조치로, 향후 지원 대상 국가를 확대할 계획이다.
일레븐랩스가 AI 영상 편집기 '스튜디오 4.0'을 공개했다. 영상, 이미지, 32개 이상 언어의 1만 개가 넘는 음성, 음악 및 효과음 생성을 단일 타임라인에 직접 통합했다. 프레임 단위로 영상을 분석해 초안 편집과 오디오 동기화를 돕는 '스튜디오 에이전트'도 함께 지원한다.
일레븐랩스가 팟캐스트와 영상 창작자를 위한 오디오 편집기 '스튜디오 4.0'을 공개했다. 1만 개 이상의 AI 음성과 배경음악, 음향 효과 생성을 지원하며, 대본을 수정하면 재녹음 없이 음성을 다시 생성해 준다. 또한 아이디어를 바탕으로 대본 작성과 클립 배치를 돕는 '스튜디오 에이전트'도 탑재됐다.
일레븐랩스가 MCP 커넥터를 확장해 클로드, 챗GPT, 커서 등 AI 어시스턴트 내에서 음성, 음악, 이미지, 비디오를 직접 생성할 수 있도록 지원했다. 별도 API 키 없이 OAuth 로그인만으로 50개 이상의 모델을 활용할 수 있으며, 생성물은 일레븐크리에이티브 작업 공간에 동기화된다.
일레븐랩스는 음악 생성 모델 'Music v2.5'를 출시하고 ElevenMusic의 기본 모델로 적용했다. 47,885개 비교 테스트에서 우수한 평가를 받았으며 악기 소리와 편곡 완성도가 한층 자연스러워졌다. 무료 플랜을 포함한 전 요금제에 무손실 다운로드와 상업적 저작권을 제공하지만, 타 아티스트 곡을 참조한 음원은 다운로드가 제한된다.
유니버설 뮤직 그룹과 일레븐랩스가 다년간의 전략적 제휴를 발표했다. 양사는 팬들이 참여 아티스트의 음원을 합법적으로 리믹스하고 새로운 트랙으로 재창작할 수 있는 독립 AI 음악 플랫폼을 개발 중이며, 아티스트에게 정당한 보상을 분배할 방침이다.
인도 스타트업 머프 AI가 텍스트 음성 변환 모델 'Falcon 2'를 공개했다. 생성 비용은 분당 0.01달러로 ElevenLabs의 5분의 1 수준이며, 응답 지연 시간은 100밀리초 미만이다. 벤치마크에서 OpenAI의 일부 시스템을 앞섰으며, 35개 이상 언어와 1만 건 동시 통화를 지원한다.
어도비는 파이어플라이 오디오 기능을 정식 출시했다. 저작권 분쟁 없는 상업용 음악, 효과음, 음성 생성을 지원하며 일레븐랩스 연동도 제공한다. 또한 구글 제미나이 옴니 플래시 모델을 추가하고 AI 어시스턴트에 일일 무료 생성 혜택을 적용했다.
일레븐랩스가 실시간 음성 모델 '일레븐 v3 컨버세이셔널'을 정식 출시했다. 70개 이상의 언어와 1만 1천 개 이상의 음성을 지원하며, 개발자는 오디오 태그를 활용해 웃음, 속삭임 등 감정을 정밀하게 제어할 수 있다. 가격은 1천 자당 0.05달러부터다.
일레븐랩스는 제품과 워크플로에 AI 더빙을 바로 연동할 수 있는 '더빙 v2' API를 공개했다. 원본 음성의 연기를 바탕으로 90개 이상 언어에서 억양과 감정을 그대로 보존하며 타이밍을 자동 동기화한다. 배경음과 음악, 다중 화자 처리 성능도 함께 개선됐다.
일레븐랩스가 음악 생성 모델 'Music v2'에 신기능 'References'를 출시했다. 이용자는 10초에서 5분 길이의 음원을 업로드해 생성될 음악의 스타일, 악기 구성, 분위기를 직접 제어할 수 있다. 타인의 저작물 업로드를 차단하는 저작권 검사가 적용되며 ElevenMusic 및 API에서 제공된다.
넷플릭스는 첫 공개되는 웡카 리얼리티 쇼 'Wonka’s The Golden Ticket'의 내레이션에 고 진 와일더의 AI 복원 음성을 사용한다고 밝혔다. 이번 음성은 AI 음성 기업 일레븐랩스와의 협업으로 제작됐으며 유족의 동의를 얻었다. 유명인의 음성을 공식 승인 하에 재현하는 사례가 늘어나는 추세다.
일레븐랩스가 ElevenCreative에 'Avatars' 기능을 추가했다. 단일 인터페이스에서 대본 작성과 음성 선택, 립싱크 영상 생성을 한 번에 처리하며, 사진이나 텍스트로 고정된 외형을 유지할 수 있다. 현재 모든 유료 플랜에 제공된다.
일레븐랩스가 원본 음성의 감정과 연기 톤을 여러 언어로 그대로 보존하는 차세대 AI 모델 '더빙 v2'를 발표했다. 번역된 오디오에서도 화자의 미묘한 감정선이 유지되어, 글로벌 영상 콘텐츠의 음성 현지화 작업이 한층 더 자연스러워질 전망이다.
일레븐랩스가 음악 생성 모델 Music v2를 출시했다. 모든 장르에 걸쳐 보컬 표현력과 악기 세션, 편곡 완성도가 향상되었으며 다국어 지원도 강화되었다. 이전 버전에서 불가능했던 기능들이 더해져 AI 음악의 완성도와 창작 폭이 한층 넓어졌다.
일레븐랩스는 ElevenCreative 플랫폼의 타임라인 편집기인 Studio에 AI 공동 편집 도구 'Studio Agent'를 추가했다. 창작자와 마케터는 외부 툴로 이동할 필요 없이 한 타임라인에서 AI와 협업하며 음성, 음악, 음향 효과, 영상을 손쉽게 믹싱할 수 있다.