본문으로 건너뛰기
IFAI

이미지·영상 생성

Midjourney, Sora, Veo, Suno 등 AI 이미지·영상·음성·음악 생성의 새 모델과 새 기능.

최근 7일 소식 4개

  1. 확산 지수 41

    파키스탄 전 총리 임란 칸, 옥중에서 AI 음성 복제로 선거 운동

    일요일 저녁, 파키스탄 테흐리크-에-인사프(PTI)당이 일레븐랩스의 AI 음성 복제 기술을 활용해 수감 중인 임란 칸 전 총리의 목소리로 4분 분량의 유세 영상을 공개했다. 옥중 메모를 기반으로 제작된 영상은 50만 회 이상 시청되었으며, 당국은 주요 SNS 접속을 차단했다.

  2. 확산 지수 39

    스태빌리티 AI, 단일 이미지로 3D 생성하는 '스테이블 제로123' 공개

    스태빌리티 AI가 단일 2D 이미지를 기반으로 다양한 시점과 3D 메쉬를 생성하는 '스테이블 제로123'을 공개했다. 고품질 데이터 필터링과 카메라 각도 조건을 추가해 이전 모델 대비 학습 효율을 40배 높였다. 단일 시점 생성은 SD1.5 수준의 VRAM을 소모하며 비상업용 가중치는 허깅페이스에 공개됐다.

  3. 확산 지수 31

    구글, 텍스트로 음악 만드는 AI 툴 '뮤직FX' 공개

    구글이 몇 마디 문장으로 음악을 생성하는 실험용 도구 '뮤직FX(MusicFX)'를 공개했다. 뮤직LM 모델 기반으로 딥마인드의 신스ID(SynthID) 워터마크 기술을 적용해 출처를 보증한다. 저작권 보호를 위해 보컬 생성과 특정 아티스트 모방은 차단되며, 미국과 호주 등 일부 국가에서 우선 테스트할 수 있다.

  4. 확산 지수 50

    메타, 독립형 웹 이미지 생성 도구 '이매진 위드 메타' 공개

    메타가 웹에서 바로 사용할 수 있는 독립형 AI 이미지 생성 도구 '이매진 위드 메타'를 선보였다. 자체 Emu 모델을 기반으로 미국 사용자에게 무료 제공되며, 프롬프트당 4장의 이미지를 만들어 준다. 향후 이미지 자르기나 압축에도 유지되는 비가시성 AI 워터마크를 도입해 투명성을 높일 계획이다.

  5. 확산 지수 35

    AI 아트 플랫폼 레오나르도 AI, 3100만 달러 투자 유치

    호주 기반 AI 아트 플랫폼 레오나르도 AI가 3100만 달러 규모의 투자를 유치했다. 이용자 700만 명과 7억 장 이상의 이미지 생성을 달성한 이 플랫폼은 정밀한 이미지 제어 기능과 자체 모델 학습, 기업용 클라우드 지원을 앞세워 확장에 나선다.

  6. 확산 지수 39

    레오나르도 AI, 실시간 이미지 생성 '라이브 캔버스' 무료 공개

    레오나르도 AI가 실시간 드로잉 기능인 'Live Canvas'를 유무료 모든 사용자에게 오픈했다. 캔버스에 간단한 스케치를 그리는 즉시 고품질 이미지로 렌더링된다. 제작진은 향후 1~2주 안에 추가 기능도 순차 공개할 예정이라고 전했다.

  7. 확산 지수 44

    스태빌리티 AI, 1단계 실시간 이미지 생성 모델 'SDXL 터보' 공개

    스태빌리티 AI가 실시간 텍스트-투-이미지 모델 'SDXL Turbo'를 공개했다. 새로운 적대적 확산 증류(ADD) 기술로 생성 단계를 50회에서 단 1회로 줄였으며, A100에서 512x512 이미지를 207ms 만에 뽑아낸다. 현재는 비상업적 연구 목적으로만 제공된다.

  8. 확산 지수 51

    AI 영상 플랫폼 피카, 5500만 달러 유치 및 '피카 1.0' 공개

    AI 비디오 스타트업 피카(Pika)가 라이트스피드 주도로 5500만 달러 규모의 투자를 유치하고 'Pika 1.0' 얼리 액세스를 시작했다. 텍스트 기반 영상 생성 외에도 영상 속 인물의 의상을 바꾸거나 새로운 캐릭터를 추가하고 캔버스를 확장하는 세부 편집 기능을 제공한다.

  9. 확산 지수 42

    런웨이, Gen-2에 '모션 브러시' 추가…칠한 부분만 골라 움직인다

    Runway가 비디오 생성 AI Gen-2에 부분 움직임을 지정할 수 있는 '모션 브러시'를 도입했다. 사용자가 이미지 특정 영역을 칠하고 방향과 수치를 지정하면 원하는 대로 움직임을 제어할 수 있다. 스타일 프리셋과 정밀 카메라 제어도 함께 지원된다.

  10. 확산 지수 44

    스태빌리티 AI, 비디오 모델 '스테이블 비디오 디퓨전' 공개 및 가중치 오픈소스화

    스태빌리티 AI가 첫 영상 생성 파운데이션 모델 '스테이블 비디오 디퓨전'을 연구 프리뷰로 공개했다. 스테이블 디퓨전 기반의 이미지-비디오 변환 모델 2종으로 구성되며 각각 14프레임과 25프레임의 영상을 생성한다. 깃허브와 허깅페이스에 코드와 가중치가 공개되었으나 현재는 연구 목적으로만 쓸 수 있다.

  11. 확산 지수 49

    구글, 음악 생성 AI 모델 '리리아' 공개: 아티스트 음성 스타일 담은 30초 음원 제작

    구글 딥마인드와 유튜브가 음악 생성 모델 '리리아(Lyria)'를 공개했다. 유튜브 쇼츠 실험 기능인 '드림 트랙'을 통해 찰리 푸스 등 공식 협업 아티스트의 보컬 스타일로 30초 분량 음원을 생성할 수 있다. 생성된 오디오에는 비가청 워터마크인 SynthID가 적용되며, 현재 소수 창작자를 대상으로 테스트 중이다.

  12. 확산 지수 31

    AI 비디오 툴 Deforum, 공식 디스코드 봇 공개…SDXL 지원

    AI 비디오 제작 도구 Deforum이 공식 디스코드 봇을 발표했다. 이용자는 디스코드 채팅창에서 SDXL 기반의 영상과 비주얼을 손쉽게 제작할 수 있으며, 며칠 내로 순차적 베타 테스트가 시작된다. 번거로운 로컬 환경 구축 없이 접근성이 크게 높아질 전망이다.

  13. 확산 지수 31

    메타, 텍스트로 음성과 효과음 만드는 Audiobox 공개

    메타가 텍스트 프롬프트로 음성과 효과음, 배경음을 생성·편집할 수 있는 오디오 모델 Audiobox를 발표했다. 음성 입력과 텍스트 설명을 결합해 특정 목소리의 억양과 주변 환경을 자유롭게 바꿀 수 있는 것이 특징이다. 현재 선정된 연구진에게 연구용으로 제공되며 인터랙티브 데모도 함께 공개됐다.

  14. 확산 지수 39

    폴리캠, 3D 가우시안 스플래팅 '부유물 제거' 업데이트…상업적 이용도 무료화

    폴리캠이 3D 가우시안 스플래팅에서 흔히 발생하는 허공의 노이즈(플로터)를 자동 제거하는 알고리즘 업데이트를 공개했다. 아이폰 앱에서 직접 스플래트를 생성하거나 영상 업로드로 만들 수 있으며, 상업적 이용도 무료로 전환됐다. 프로 사용자는 최대 1,000장의 이미지를 업로드할 수 있다.