허깅페이스, 오픈소스 모델로 24시간 자동 방송하는 'AI WebTV' 공개
허깅페이스가 영상 및 음원 자동 생성을 시연하는 실험 프로젝트 'AI WebTV'를 공개했다. ChatGPT로 프롬프트를 확장하고 오픈소스 모델 Zeroscope V2로 영상 생성, FILM 보간 및 MusicGen 음악 합성을 거쳐 FFmpeg로 실시간 송출한다. 아직 품질 한계는 있지만 완전 자동화된 오픈소스 멀티모달 방송 파이프라인의 가능성을 입증했다.
AI 음악
최신 소식 보기
Epidemic Sound, 사운드매치 출시: 영상 장면에 맞춰 몇 초 만에 음악 추천
Epidemic Sound가 AI 기반 음악 추천 기능 '사운드매치'를 공개했다. 사용자가 비디오를 올리고 특정 구간을 지정하면 AI가 영상 속 장면을 분석해 키워드를 생성하고, 일일 25억 회 이상의 유튜브 조회수 데이터를 기반으로 어울리는 사운드트랙을 즉시 찾아준다.
그래미 어워드, AI 규칙 발표: 수상 자격은 '인간 창작자'에게만
레코딩 아카데미가 그래미 어워드 수상 자격을 인간 창작자로 제한하는 새 규정을 공개했다. AI 음성이나 악기 연주가 포함된 곡도 후보에 오를 수 있지만, 실제 인간의 실질적 기여가 입증되어야 한다. AI가 도구로 쓰일 수는 있어도 트로피는 사람 몫이다.
폴 매카트니, AI로 존 레넌 목소리 분리해 비틀스 '마지막 곡' 연내 발표
폴 매카트니는 AI 기술을 활용해 비틀스의 '마지막 음반'을 완성했다고 밝혔다. 피터 잭슨 감독의 다큐멘터리에 쓰인 오디오 분리 기술로 오래된 카세트테이프에서 존 레넌의 목소리만 깨끗하게 추출해 믹싱을 마쳤으며, 해당 곡은 연내 정식 공개될 예정이다.
메타, 텍스트와 멜로디로 음악 만드는 '뮤직젠' 공개
메타가 텍스트 프롬프트나 멜로디 입력을 바탕으로 음악을 생성하는 AI 모델 '뮤직젠(MusicGen)'을 공개했다. 2만 시간 분량의 음악과 악기 샘플로 훈련되어 콧노래만으로도 트랙을 만들어낼 수 있다. 누구나 음악을 만들 수 있는 길이 열렸지만, 음반 업계와의 저작권 분쟁도 예상된다.
가사와 프롬프트로 완곡 만드는 신규 오픈소스 AI 음악 생성기 공개
텍스트 프롬프트와 가사만 입력하면 보컬이 포함된 완곡을 생성하는 새로운 오픈소스 AI 음악 생성기가 GitHub에 공개됐다. 레게나 컨트리 등 다양한 장르에서 깔끔한 입체 음향을 들려주지만 일부 발음 오류가 남는다. 로컬 실행을 위한 가이드도 함께 제공된다.
스포티파이, AI 생성 음원 대거 삭제: 음원 조작 혐의로 Boomy 곡 7% 퇴출
스포티파이가 음악 생성 AI 스타트업 Boomy로 만든 곡 수만 개를 전격 삭제했다. 유니버설 뮤직이 봇을 동원한 스트리밍 수 조작과 로열티 편취 의혹을 제기한 데 따른 조치로, Boomy 곡의 약 7%에 해당한다. 스포티파이는 창작자 보호를 위해 부정 스트리밍 대응과 로열티 보류 조치를 취했다고 밝혔다.
그라임스, AI 음성 플랫폼 Elf.Tech 공개…목소리 쓰고 저작권료 50% 배분
이번 주 아티스트 그라임스가 자신의 목소리를 복제해 곡을 만들 수 있는 AI 소프트웨어 'Elf.Tech'를 공개했다. 녹음본을 올리면 그라임스의 음색으로 변환되며, 마스터 레코딩 로열티 50%를 나누는 조건으로 음원 발매가 가능하다. AI 복제를 막는 대신 목소리를 오픈소스화해 수익을 나누는 시도로 주목받고 있다.
아티스트 그라임스, 자신의 AI 목소리 활용한 음원에 로열티 50% 분배 제안
아티스트 그라임스는 자신의 목소리를 모방해 만든 AI 음악이 성공할 경우 음원 로열티의 50%를 제작자와 나누겠다고 밝혔다. 음반사 계약이나 법적 제약이 없다고 밝힌 그녀는 예술의 오픈소스화를 지지하며 기꺼이 실험 대상이 되겠다고 덧붙였다.
드레이크 AI 복제곡 플랫폼서 일제히 퇴출：유니버설 항의
드레이크와 더 위켄드의 목소리를 AI로 모사한 곡 'Heart On My Sleeve'가 스포티파이와 애플뮤직 등 주요 스트리밍 플랫폼에서 전면 삭제됐다. 삭제 전 스포티파이에서 62만 5천 회 이상 재생됐으며, 유니버설 뮤직 그룹의 저작권 침해 요청에 따른 조치다.
어도비, 생성형 AI '파이어플라이' 비디오 편집 툴에 도입
어도비가 생성형 AI 모델 '파이어플라이'를 크리에이티브 클라우드 비디오 및 오디오 도구로 확장한다고 발표했다. 완전한 영상 생성은 아직 지원하지 않지만, 텍스트 명령만으로 영상 색보정을 하거나 효과음을 입히고 대본을 스토리보드로 자동 변환할 수 있게 된다.
보이시모드, 1450만 달러 유치…실시간 AI 음성 변조 고도화
음성 변조 툴 개발사 보이시모드가 1450만 달러 규모의 투자를 유치했다고 밝혔다. 지난해 인수한 복트로 랩스의 기술을 결합해 실시간 AI 음성 변조 및 다른 사람의 목소리로 노래하는 기능을 선보일 계획이다. 영상 필터처럼 음성도 누구나 손쉽게 갈아입는 환경을 만들겠다는 구상이다.
구글, 텍스트로 고음질 음악 만드는 AI 'MusicLM' 공개… 저작권 우려로 출시는 보류
구글 연구진은 텍스트 묘사를 바탕으로 정교한 음악을 생성하는 AI 모델 MusicLM을 발표했다. 28만 시간 분량의 음악으로 훈련되어 허밍 기반 작곡이나 긴 배경음악도 제작 가능하다. 다만 생성물의 약 1%가 원본 음악을 그대로 복제하는 문제가 확인되어 공개 출시는 보류됐다.
이미지 생성 AI 핵심 '디퓨전 모델'의 역사와 원리
현대 이미지 생성 AI의 핵심 기술인 디퓨전 모델의 발전 과정과 작동 원리가 조명됐다. 비평형 열역학에서 착안한 이 기술은 노이즈로부터 데이터를 복원하는 역과정을 학습하며, 오픈AI의 CLIP과 결합해 정밀도를 대폭 끌어올렸다. 최근에는 예술 창작을 넘어 작곡과 신약 단백질 설계 등 생명공학 분야로 영역을 넓히고 있다.