일레븐랩스, 다국어 음성 모델 v1 공개: 프랑스어·독일어 등 7개 언어 지원

콘텐츠를 다른 언어로 번역할 때 가장 아쉬운 점은 원래 화자가 가진 고유한 목소리 톤과 감정이 완전히 사라진다는 사실입니다.

ElevenLabs가 자사 베타 플랫폼을 통해 새로운 다국어 음성 합성 모델인 Eleven Multilingual v1을 출시했습니다. 이번 모델은 프랑스어, 독일어, 힌디어, 이탈리아어, 폴란드어, 포르투갈어, 스페인어 등 7개 언어를 새롭게 지원합니다. 모든 유료 요금제 사용자는 음성 합성 메뉴의 드롭다운 목록에서 바로 이 모델을 선택해 사용할 수 있습니다.

언어가 바뀌어도 목소리와 억양은 그대로

이번 모델은 ElevenLabs의 자체 연구를 바탕으로 개발되었습니다. 문맥에 맞춰 미묘한 뉘앙스를 이해하고 풍부한 감정을 전달하던 기존 영어 전용 모델의 강점을 그대로 계승했습니다.

가장 주목할 부분은 VoiceLab 기능과의 연동입니다. 즉석 음성 복제나 음성 디자인으로 만든 목소리를 그대로 사용해, 원래 화자의 고유한 음색은 물론 특유의 억양까지 유지하면서 새로운 언어로 말하게 할 수 있습니다. 여러 언어가 섞인 문장도 인식해 소리 낼 수 있지만, 최상의 결과물을 얻으려면 한 번에 한 가지 언어만 입력하는 것을 권장하고 있습니다.

초기 버전인 만큼 한계도 존재합니다. 다른 언어로 작성된 텍스트 안에서도 숫자나 약어, 외래어는 영어 발음으로 되돌아가는 현상이 있습니다. 예를 들어 스페인어 문장에 숫자 11이나 radio라는 단어를 넣으면 영어식으로 발음될 수 있습니다. ElevenLabs는 개선 작업이 진행되는 동안 숫자와 약어를 해당 언어의 철자로 직접 풀어 적어달라고 안내했습니다.

왜 중요한가

1인 크리에이터와 인디 게임 개발사에게 이번 업데이트는 매우 유용한 도구입니다. 과거에는 엄두를 내기 힘들었던 다국어 현지화 작업을 진행하면서, 모든 언어에서 동일한 캐릭터 음색을 일관되게 유지할 수 있기 때문입니다. 숫자나 약어를 직접 텍스트로 풀어써야 하는 번거로움은 있지만, 글로벌 배포를 준비 중이라면 지금 바로 워크플로에 도입해 볼 가치가 충분합니다.

업계 전반으로 보면, 음성 합성 경쟁이 단순한 발음 정확도 싸움에서 감정 표현과 크로스 링구얼 일관성으로 이동했음을 보여줍니다. 일부 엔터프라이즈 전용으로 묶어두지 않고 모든 구독자에게 즉시 개방해 피드백을 빠르게 확보하려는 전략도 영리합니다.

다만 숫자가 영어로 튀는 결함에서 보듯, 언어별 텍스트 처리와 발음 매핑은 여전히 불안정한 구석이 있습니다. 서구권 언어를 넘어 향후 어족이 전혀 다른 언어로 확장될 때도 이 같은 감정 표현과 음색 보존 능력이 안정적으로 유지될 수 있을지가 핵심 과제입니다.