구글, 음악 생성 AI 모델 '리리아' 공개: 아티스트 음성 스타일 담은 30초 음원 제작

AI 음악 생성에서 가장 까다로운 문제는 여러 악기와 보컬이 겹칠 때 자연스러움을 유지하고, 몇 초를 넘어 곡의 전개를 매끄럽게 이어가는 일이었습니다.

Google DeepMind가 YouTube와 손잡고 자사 최고 성능의 음악 생성 모델인 'Lyria'를 공개했습니다. 이와 함께 쇼츠 제작자를 위한 'Dream Track'과 전문 음악가를 위한 'Music AI tools' 실험 프로젝트를 함께 선보였습니다.

특히 이번 프로젝트에는 찰리 푸스와 티페인을 비롯한 글로벌 정상급 아티스트 9명이 정식 파트너로 참여해 합법적인 AI 보컬 스타일을 제공합니다.

프롬프트 입력하면 30초 음원 완성

음악은 비트, 음표, 화성이 매초 정밀하게 맞물려 있어 단순 음성 합성보다 생성 난도가 훨씬 높습니다. 기존 모델들은 마디가 바뀌거나 절이 이어질 때 음악적 일관성을 유지하는 데 자주 실패했습니다.

DeepMind에 따르면 Lyria는 보컬과 반주를 동시에 고품질로 생성하며, 사용자가 음악의 스타일과 연주 표현을 세밀하게 제어할 수 있는 것이 강점입니다.

YouTube Shorts에서 테스트 중인 Dream Track 실험은 미국의 일부 크리에이터를 대상으로 먼저 적용됩니다. 크리에이터가 아이디어를 텍스트로 적고 참여 아티스트 목록에서 원하는 가수를 선택하면, 해당 가수의 목소리 스타일과 가사, 반주가 포함된 최대 30초 길이의 오리지널 음원이 생성됩니다.

참여 아티스트는 Charlie Puth, T-Pain, John Legend, Sia, Charli XCX, Demi Lovato, Troye Sivan, Alec Benjamin, Papoose 등 총 9명입니다.

찰리 푸스는 YouTube가 아티스트를 대체하는 것이 아니라 창작을 가속하는 책임 있는 파트너십을 보여줬다고 언급했으며, 기술 도입에 적극적이었던 티페인 역시 미래를 함께 만들어가는 훌륭한 첫걸음이라고 평가했습니다.

아울러 전문가용 툴에서는 흥얼거리는 허밍을 호른 연주로 바꾸거나, MIDI 건반 코드를 성가대 합창 보컬로 변환하는 등 창작 스케치 단계의 혁신적인 기능들이 포함되어 있습니다.

귀에는 들리지 않는 워터마크, SynthID 음향 버전 탑재

AI 음악의 악용과 딥페이크 문제를 막기 위해 Google은 자체 전자 워터마크 기술인 'SynthID'를 오디오 분야로 확장 적용했습니다.

Lyria로 생성된 모든 오디오에는 사람의 귀에는 전혀 들리지 않는 고유 워터마크가 내장됩니다. 소리의 주파수 스펙트럼 변화를 시각화한 데이터에 식별 신호를 심는 새로운 방식을 씁니다.

이 워터마크는 MP3 파일 압축, 노이즈 추가, 배속 변경과 같은 음원 변형을 거쳐도 탐지가 가능합니다. 심지어 노래의 특정 구간에만 AI가 쓰였는지 여부까지 감지해낼 수 있습니다.

왜 중요한가

우리는 Google이 기술 성능 자체보다 '음악 산업과의 타협 방식'에서 매우 영리한 수를 뒀다고 평가합니다.

최근 음악 업계는 무단으로 목소리를 학습한 AI 커버곡으로 몸살을 앓고 있습니다. Google은 전면 개방 대신 아티스트의 사전 동의를 얻어 30초 쇼츠 음원으로 용도를 엄격히 제한하며 저작권 충돌을 사전에 차단했습니다.

일반 크리에이터에게는 저작권 걱정 없는 고품질 BGM 제작 도구가 생기는 셈이며, 작곡가들에게는 허밍만으로 편곡 아이디어를 시험해보는 작업 효율화의 가치가 큽니다.

하지만 한계도 분명합니다. 이 모델은 현재 폐쇄적인 소수 파트너십에 기대고 있어, 향후 일반 대중이나 독립 아티스트들에게 개방되었을 때 저작권료 분배를 어떻게 표준화할 것인지는 여전히 과제로 남아 있습니다. 안전하지만 다소 갇혀 있는 실험이라는 인상을 지우기 어렵습니다.