일레븐랩스, 음악 플랫폼 '일레븐뮤직' 출시:생성부터 리믹스·수익화까지 지원
일레븐랩스가 자체 음악 모델 기반의 신규 플랫폼 '일레븐뮤직'을 발표했습니다. 음악 탐색과 생성, 리믹스 도구에 더해 창작자가 수익을 창출할 수 있는 기능까지 통합한 것이 특징입니다. 음성 AI에 이어 음악 생성 시장으로 본격적인 확장에 나섰습니다.
일레븐랩스가 자체 음악 모델 기반의 신규 플랫폼 '일레븐뮤직'을 발표했습니다. 음악 탐색과 생성, 리믹스 도구에 더해 창작자가 수익을 창출할 수 있는 기능까지 통합한 것이 특징입니다. 음성 AI에 이어 음악 생성 시장으로 본격적인 확장에 나섰습니다.
명령어 한 줄로 헤드라인을 유튜브 쇼츠 영상으로 만들어 게시까지 해주는 오픈소스 도구 'YouTube Shorts Pipeline'이 공개됐다. 클로드, 제미나이, 일레븐랩스, 위스퍼를 연동해 편당 3~5분, 약 0.10달러의 비용으로 작동하며 전 과정이 로컬에서 실행된다.
일레븐랩스가 음성과 디지털 채널을 아우르는 고객지원 에이전트 'ElevenAgents for Support'를 출시했다. 90개 이상의 언어와 1초 미만의 응답 속도를 지원하며 고객 감정에 맞춰 대화 톤을 조절한다. 기존 SOP를 기반으로 노코드 설정이 가능하며, 복잡한 문의는 맥락을 유지한 채 상담원에게 즉시 인계된다.
일레븐랩스가 업계 최초로 AIUC-1 인증 기반의 AI 음성 에이전트 보험을 도입했다. 5,000회 이상의 적대적 시뮬레이션을 통과해, AI가 잘못된 정보를 안내하는 등 업무 실수를 저지를 때도 일반 직원처럼 보험 처리가 가능해졌다. 기업들의 보안 및 책임 우려를 더는 계기가 될 것으로 보인다.
일레븐랩스가 텍스트 원고를 원클릭으로 고품질 오디오북으로 변환해 배포까지 마치는 'Audiobooks' 기능을 선보였다. 감정 표현이 풍부한 AI 음성과 목소리 복제, 세밀한 장면 연출을 지원하며, 완성된 오디오북은 ElevenReader 및 주요 플랫폼으로 즉시 배포할 수 있어 복잡한 제작 비용과 시간을 대폭 줄였다.
일레븐랩스가 텍스트 음성 변환 모델 'Eleven v3'를 정식 출시했다. 전화번호, 통화, 화학식 등 맥락 기반 기호 판독 능력을 개선해 오류율을 15.3%에서 4.9%로 68% 낮췄으며, 테스트에서 72%의 이용자 선호를 기록했다.
오픈소스 로컬 음성 앱 Voicebox가 깃허브 스타 4만 2천 개 이상을 기록하며 주목받고 있습니다. 몇 초 분량의 오디오로 음성을 복제하고 전역 단축키를 통해 어떤 입력창에서든 음성 입력을 지원하며, Claude Code 등과 연동해 에이전트에 음성을 입힐 수도 있습니다. 유료 구독 없이 로컬 환경에서 음성 파이프라인을 구축할 수 있습니다.
일레븐랩스는 그래미 수상 아티스트 및 프로듀서들과 협업한 스튜디오급 음악 앨범 'The Eleven Album'을 공개했다. 신규 모델 'Eleven Music'으로 제작되었으며, 참여 아티스트가 전곡의 저작권과 스트리밍 로열티를 모두 갖는다. 소송이 잇따르던 AI 음악 생태계가 정식 라이선스 기반의 협업으로 전환되고 있음을 보여준다.
일레븐랩스가 이미지 및 비디오 생성 베타 기능을 선보였다. 소라, 베오, 클링, 플럭스 등 주요 영상·이미지 모델을 플랫폼 내에 통합하고, 자사 음성 모델을 활용한 립싱크 및 배경음악 합성과 편집까지 스튜디오에서 한 번에 처리할 수 있도록 지원한다.
일레븐랩스가 법률 AI 플랫폼 하비(Harvey)와 파트너십을 체결했다. 하비에 일레븐랩스의 음성 기술을 적용해 수십 개 언어와 방언으로 답변을 들을 수 있게 된다. 향후 음성 대화 모드와 모의 재판 음성 시뮬레이션 기능도 순차 도입될 예정이다.
일레븐랩스가 기업들이 유명인의 복제 AI 음성을 합법적으로 라이선스해 광고 등에 쓸 수 있는 마켓플레이스를 출시했다. 마이클 케인, 앨런 튜링, 마크 트웨인 등 28명의 음성이 포함됐으며 정당한 대가와 동의를 전면에 내세웠다. 무단 복제가 만연하던 AI 음성 시장의 양성화를 꾀하는 조치다.
일레븐랩스는 오스카 수상 배우 매튜 맥커너히가 수년 전부터 초기 투자자로 참여해왔다고 밝혔다. 맥커너히는 일레븐랩스의 AI 음성 기술을 활용해 자신의 뉴스레터를 본인 특유의 목소리 그대로 스페인어 오디오로 변환해 글로벌 청취자에게 선보인다.
일레븐랩스가 음성 에이전트용 실시간 텍스트 변환 모델 'Scribe v2 Realtime'을 선보였습니다. 150밀리초 미만의 지연 시간으로 90개 언어를 지원하며 단어 예측 기능도 갖췄습니다. 현재 공식 API와 에이전트 서비스에서 바로 연동할 수 있습니다.
Fish Audio는 텍스트 음성 변환(TTS) 모델 'Fish Audio S1'을 정식 공개했다. 일레븐랩스보다 6배 저렴한 가격을 내세워 활성 개발자 2만 명과 500만 달러의 연간 반복 매출(ARR)을 달성했으며, 무료 음성 복제를 지원한다.
일레븐랩스가 'Studio 3.0'을 공개했다. 영상 지원과 함께 음성 해설, 음악, 음향 효과, 음성 분리, 음성 변조 등 AI 오디오 기능을 단일 편집기에 통합했다. 자동 자막 생성, 실제 녹음 음성 교정, 다자간 협업 댓글 기능도 새롭게 제공된다.
일레븐랩스가 크리에이터와 미디어를 위한 관리형 서비스 '프로덕션'을 출시했다. 언어학자와 음향 전문가 네트워크가 참여해 더빙, 자막, 녹취록, 오디오북을 끝까지 다듬어 주며, 순수 AI 음성보다 자연스러운 품질을 내세운다.
일레븐랩스는 대화형 에이전트의 성능을 검증하는 'Agents Testing'을 선보였다. 외부 도구 호출, 상담원 이관, 안전 가드레일 등을 시뮬레이션으로 점검할 수 있으며, 기존 고객 대화에서 테스트를 자동 생성해 CI/CD 파이프라인에 연동할 수 있다. 프롬프트를 수정할 때 발생할 수 있는 오류를 사전에 차단하는 데 유용하다.
일레븐랩스가 차세대 음성 모델 'Eleven v3 (alpha)'를 API로 공개했다. 70개 이상의 언어를 지원하며, 인원수 제한 없이 자연스러운 끼어들기와 감정 전환을 처리하는 대화 모드 및 오디오 태그 기반 감정 제어 기능이 추가됐다.
일레븐랩스는 대화형 에이전트 플랫폼에 텍스트 전용 기능인 '챗 모드'를 도입했다. 주문 번호나 이메일 등 정밀한 입력이 필요한 상황을 위한 기능으로, 기존 음성 에이전트도 HTML 코드 한 줄이나 API를 통해 즉시 텍스트 모드로 전환해 배포할 수 있다.
일레븐랩스가 개발자를 위한 '일레븐 뮤직 API'를 공개했다. 정식 라이선스를 취득한 데이터로 학습되어 폭넓은 상업적 이용이 가능한 점이 핵심이다. 일레븐랩스는 서비스 출시 이후 창작자들이 이미 75만 곡 이상의 음악을 생성했다고 덧붙였다.