레오나르도 AI, 창작자 겨냥한 'Yours to Create' 캠페인 공개
레오나르도 AI가 창작자들의 생성형 AI 활용을 장려하는 새 캠페인 'Yours to Create'를 시작했다. 공식 SNS 게시물에 참여한 사용자에게 300토큰을 지급하는 등 프로 창작자를 자사 워크플로로 끌어들이기 위한 행보에 나섰다.
레오나르도 AI가 창작자들의 생성형 AI 활용을 장려하는 새 캠페인 'Yours to Create'를 시작했다. 공식 SNS 게시물에 참여한 사용자에게 300토큰을 지급하는 등 프로 창작자를 자사 워크플로로 끌어들이기 위한 행보에 나섰다.
타부스(Tavus)가 실시간 인간 렌더링 모델 '피닉스-4(Phoenix-4)'를 공개했다. 기존의 반복 재생 영상 기반 아바타와 달리, 밀리초 단위 지연 시간으로 대화 맥락에 맞는 감정 표정과 경청 반응, 두경부 움직임을 실시간 생성한다.
구글이 제미나이 앱에 딥마인드의 최신 음악 생성 모델 '리리아 3' 베타 버전을 추가했다. 텍스트 프롬프트를 입력하거나 사진·동영상을 올리면 가사가 포함된 30초 분량의 음원과 커버 이미지를 즉시 만들어 준다. 모든 생성 음원에는 신스ID 워터마크가 적용되며 18세 이상 이용자에게 우선 제공된다.
엔비디아가 편집 전후 예시 이미지를 통해 스타일을 복제하는 이미지 편집 기술 'LoRAWeave'를 선보였다. 편집 전·후 예시 쌍과 대상 이미지 등 3장을 입력하면 변화 방식을 학습해 적용한다. 텍스트 프롬프트로 설명하기 어려운 복잡한 스타일 변환을 안정적으로 재현한다.
아남이 대화형 AI 아바타를 위한 얼굴 생성 모델 '카라-3'을 발표했다. 음성 기반 모션과 렌더링을 분리해 단 한 장의 사진으로 첫 프레임 지연 약 70ms 수준의 실시간 대화를 지원한다. 블라인드 테스트 결과 시각적 화려함보다 빠른 응답 속도가 체감 현실감을 더 크게 좌우했다.
문레이크 AI가 세계 모델링 에이전트의 공개 베타를 시작했다. 단순한 장면 생성을 넘어 물리 법칙, 사운드, 상호작용 규칙을 하나로 묶어 플레이 가능한 3D 가상 세계를 자동 제작한다. 현재 대기자 명단은 1만 명을 넘었으며, 구독료는 월 15달러부터 시작한다.
Krea AI가 드로잉 앱 Wand를 인수하고 전용 iPad 앱을 출시했다. iOS 네이티브 환경에 맞춘 커스텀 브러시 기능과 실시간 AI 렌더링을 결합해, 태블릿에서 그림을 그리는 즉시 AI가 생성한 완성본을 확인할 수 있다.
런웨이가 단일 이미지를 기반으로 영화나 광고 영상을 제작할 수 있는 '스토리 패널' 추천 워크플로를 공개했다. 몇 단계만으로 일관된 캐릭터, 배경, 스타일을 유지하는 샷 목록을 만들 수 있어, 컷마다 인물이 달라지던 AI 영상 제작의 고질적 문제를 덜어준다.
바이트댄스 시드 팀은 차세대 영상 생성 모델 ‘시댄스 2.0’을 공개했다. 오디오·비디오 통합 생성 구조를 기반으로 최대 9장의 이미지와 3개의 영상, 3개의 음원을 동시 참조해 15초 분량의 스테레오 멀티숏 영상을 만들 수 있으며, 복잡한 인물 상호작용과 물리적 사실성을 대폭 개선했다.
연구진이 초고해상도 영상 생성 프레임워크 LUVE를 공개했다. 잠재 공간 업샘플링과 이중 주파수 전문가 설계를 통해 움직임의 일관성을 유지하면서 선명한 2K 및 4K 영상을 생성한다. 꿀벌의 털이나 잔물결 질감까지 세밀하게 표현할 수 있으며, 현재 논문과 데모가 공개된 상태다.
메타는 페이스북에 메타 AI 기반의 신규 기능을 출시해 정적인 프로필 사진을 손 흔들기나 꽃가루 날리기 같은 애니메이션으로 즉시 변환할 수 있도록 했습니다. 스토리 이미지 리스타일과 피드 텍스트 게시물용 움직이는 배경도 함께 추가되며 생성형 AI를 일상적인 소셜 표현 도구로 녹여냈습니다.
알리바바 큐원(Qwen) 팀이 차세대 이미지 생성 모델 Qwen-Image-2.0을 공개했다. 네이티브 2K 해상도를 지원하며 폰트 왜곡 없는 텍스트 렌더링과 최대 1000 토큰 프롬프트 기반의 포스터 및 슬라이드 제작이 가능하다. 구조를 경량화해 생성 속도도 빨라졌다.
Hyper3D가 3D 생성 AI '로댕 Gen-2(Rodin Gen-2)'와 편집 기능을 공개했다. 텍스트나 단일 이미지 기반 생성뿐 아니라, 특정 영역을 선택해 자연어 프롬프트로 세부 구조와 텍스처를 수정하는 3D 인페인팅을 지원한다. 완성된 고품질 메시는 STL 형식 등으로 내보내 3D 프린팅에 활용할 수 있다.
바이트댄스가 차세대 동영상 생성 AI 도구인 '시댄스 2.0(Seedance 2.0)'을 발표하고 지몽 AI(Jimeng AI) 일부 사용자를 대상으로 베타 테스트를 시작했다. 기존 AI 영상 특유의 물속을 떠다니는 듯한 부자연스러운 움직임을 크게 줄였다. 향후 틱톡에 도입될 가능성도 점쳐진다.
바이트댄스가 영상과 음성을 한 번에 생성하는 멀티모달 모델 'Alive'를 발표했다. 텍스트나 참조 이미지를 바탕으로 입모양과 표정이 정밀하게 일치하는 유성 영상을 생성하며, 자체 평가에서 Sora를 앞선 것으로 나타났다. 현재 논문만 공개되었으며 코드와 데모는 준비 중이다.
일레븐랩스가 텍스트 원고를 원클릭으로 고품질 오디오북으로 변환해 배포까지 마치는 'Audiobooks' 기능을 선보였다. 감정 표현이 풍부한 AI 음성과 목소리 복제, 세밀한 장면 연출을 지원하며, 완성된 오디오북은 ElevenReader 및 주요 플랫폼으로 즉시 배포할 수 있어 복잡한 제작 비용과 시간을 대폭 줄였다.
바이트댄스가 웹 검색, 정밀 편집, 논리 추론 기능을 통합한 이미지 모델 'Seedream 5.0 Preview'를 공개했습니다. 실시간 날씨나 최신 소식 데이터를 검색해 생성 이미지에 반영하며, 참고 이미지 속 착장을 추출해 평면도로 만들 수도 있습니다. 최대 2K 해상도를 지원하며 현재 무료로 제공됩니다.
칭화대 Xmax AI 팀이 가상 캐릭터와 실시간으로 상호작용하는 비디오 모델 'X1'을 공개했습니다. 스마트폰 카메라로 손동작을 인식해 초저지연으로 가상 요소를 만지며 조작할 수 있고 무제한 영상 생성을 지원합니다. 현재 비공개 베타를 진행 중입니다.
Kling AI가 멀티모달 창작 모델인 Kling 3.0을 공개했다. 이번 모델은 15초 길이의 정밀 제어 멀티샷 영상 제작과 4K 이미지 출력을 지원하며, 다중 캐릭터를 지원하는 네이티브 오디오를 갖췄다. 현재 웹에서 Ultra 구독자 대상으로 우선 제공된다.
로블록스가 Cube 파운데이션 모델 기반의 '4D 생성' 베타 버전을 공개했습니다. 정적 3D 오브젝트에 동작 스크립트와 상호작용을 더해, 텍스트 입력만으로 바퀴가 돌아가며 직접 운전할 수 있는 자동차를 게임 안에서 즉시 생성할 수 있습니다.
클링(Kling)이 3D 인식 모션 제어 기술 '3D Move(3DiMo)'를 공개했다. 영상 속 인물의 동작을 실사나 2D 캐릭터로 이전하면서 카메라 줌이나 궤도 회전 같은 앵글을 자유롭게 제어할 수 있다. 손동작 디테일과 공간 일관성을 함께 유지하며, 현재는 논문만 공개된 상태다.
어도비가 파이어플라이 구독자를 대상으로 이미지와 영상 무제한 생성을 지원하기 시작했다. 자체 상업용 모델뿐 아니라 구글 Nano Banana Pro, GPT, 런웨이 Gen-4 등 외부 모델도 포함된다. 3월 16일까지 가입하면 크레딧 소진 걱정 없이 최대 2K 해상도로 자유롭게 작업할 수 있다.
xAI가 Grok Imagine 1.0을 공개하며 10초 길이 영상, 720p 해상도, 대폭 향상된 오디오 생성을 지원하기 시작했다. xAI에 따르면 Imagine은 최근 30일 동안에만 12억 4500만 개 이상의 동영상을 만들었다. 방대한 사용량 속에서 영상 품질과 길이를 한 단계 끌어올렸다.
엔비디아가 텍스트와 이미지를 교차 생성하는 멀티모달 모델 DuoGen 논문을 발표했습니다. 요리 레시피나 DIY 가이드처럼 일관된 스타일의 단계별 이미지와 설명을 이어붙여 생성할 수 있으며, 현재는 기술 논문 형태로만 공개되었습니다.
수노(Suno)가 음성 메모나 악기 녹음 조각을 완곡으로 편곡해 주는 '샘플(Sample)' 기능을 공개했다. 사용자가 오디오를 녹음하거나 업로드하면 AI가 핵심 구간을 잘라내 새로운 리듬에 맞춰 재배치한다. 복잡한 작곡 소프트웨어 없이도 슬라이더 조절만으로 샘플링 기반 곡을 손쉽게 완성할 수 있다.
크레아 AI(Krea AI)가 모든 사용자를 대상으로 '리얼타임 에디트(Realtime Edit)'를 출시했다. 복잡한 텍스트 지시어를 실시간으로 반영해 이미지를 수정할 수 있어 렌더링 대기 없이 즉각적인 시각적 변화를 확인할 수 있다.
미니맥스가 AI 음악 모델 '뮤직 2.5'를 정식 발표했다. 14종의 구조 태그로 곡의 전개를 정밀 제어할 수 있으며, 100여 종의 악기와 호흡·비브라토가 살아있는 사실적인 보컬 표현을 지원한다. 웹 데모와 API로 바로 사용해 볼 수 있다.
xAI가 텍스트와 이미지로부터 네이티브 오디오를 포함한 비디오를 생성하는 'Grok Imagine API'를 공개했다. 고화질은 물론 지연 시간과 비용을 대폭 줄였으며 오브젝트 수정, 캐릭터 애니메이션 등 정밀 편집도 지원한다. 속도와 가격 경쟁력을 앞세워 창작자의 신속한 반복 실험을 돕는 것이 핵심이다.
텐센트가 대화 텍스트를 영화풍 영상으로 제작하는 프레임워크 ScriptAgent를 공개했다. 각본 작성, 모델 연출, 영상 평가를 맡은 세 에이전트가 협업해 Sora2-Pro 등 최신 영상 모델의 장면 간 일관성을 유지한다. 연구진은 전용 벤치마크인 ScriptBench도 함께 공개했다.
구글 딥마인드가 전직 픽사 애니메이터와 협업한 단편 영화 'Dear Upstairs Neighbors'를 선댄스 영화제에서 공개했다. 텍스트 프롬프트 대신 스케치 기반의 비디오 투 비디오 작업 방식과 부분 수정 툴을 도입해 Veo의 무작위성을 통제했다. 전문가의 연출 의도를 지키며 AI를 접목한 실전 워크플로다.
루마 AI가 영상 추론 모델 'Ray3.14'를 발표했다. 네이티브 1080p 출력을 지원하며 생성 속도는 4배 빨라지고 초당 비용은 3분의 1로 줄었다. 카메라 움직임과 조명 안정성을 대폭 개선해 후가공 없이도 실제 영상 제작 현장에 즉시 쓸 수 있다.