성수과기, Vidu Q1 출시: 프레임 전환과 48kHz 오디오 생성 지원
성수과기가 영상 생성 AI 모델 'Vidu Q1'을 공개했다. 연관 없는 두 이미지 사이를 자연스럽게 이어주는 기능과 1080p 렌더링을 지원한다. 또한 업계 최초로 48kHz 동기화 오디오 생성 기능을 탑재해 영상 분위기에 맞는 사운드를 텍스트로 함께 만들 수 있다.
영상 제작에서 가장 많은 에너지를 소모하는 작업은 대개 후반 편집입니다. 어색한 장면 전환을 매끄럽게 다듬고, 장면에 어울리는 효과음과 배경음악을 일일이 찾아 맞추는 일은 번거롭기 짝이 없습니다.
중국 스타트업 생수과기(ShengShu Technology)가 새로운 AI 비디오 모델인 Vidu Q1을 선보였습니다. 텍스트 프롬프트 하나로 시각 효과와 고음질 오디오를 동시에 제작하는 올인원 워크플로를 내세웠습니다.
무관한 두 이미지를 잇는 시맨틱 트랜지션
Vidu Q1의 대표 기능은 첫 프레임과 마지막 프레임을 이어주는 기능입니다. 의미적 맥락 이해를 바탕으로 서로 무관해 보이는 두 이미지 사이를 자연스럽고 개연성 있는 전환 장면으로 채워 넣습니다.
최대 5초 길이의 1080p 풀HD 해상도 생성을 지원합니다. 이전 Vidu 1.5에서 구축한 다중 엔티티 일관성 기술을 이어받아 인물과 장면의 일관성이 무너지지 않도록 유지합니다.
생수과기에 따르면 Vidu Q1은 생성형 비디오 벤치마크인 VBench에서 종합 1위를 차지했습니다.
업계 최초 48kHz 오디오와 감정 맞춤형 사운드
시각적인 향상만큼 눈에 띄는 부분은 사운드 기능입니다. 비디오 생성 모델로는 업계 최초로 48kHz 고음질 AI 효과음 생성 기능을 탑재했습니다.
사용자는 텍스트 입력만으로 배경음악, 환경음, 특정 효과음을 생성할 수 있습니다. 특히 영상의 감정선을 파악해 서스펜스 장면에는 긴장감 넘치는 스코어를, 밝은 장면에는 경쾌한 사운드를 자동으로 맞춰줍니다.
자연어를 통해 오디오를 레이어별로 쌓고 타이밍을 조절하는 것도 가능합니다. 영화 '카메라를 멈추면 안 돼!'의 프로듀서가 설립한 AI 애니메이션 스튜디오 포켓 아니메(Pocket ANIME) 및 아우라 프로덕션과 파트너십을 맺고 현장 도입을 타진하고 있습니다.
왜 중요한가
우리는 Vidu Q1이 영상 생성 기술의 경쟁 축을 단순 화질에서 완전한 후반 제작 파이프라인으로 영리하게 옮겨왔다고 봅니다.
1인 크리에이터나 독립 애니메이션 제작자에게는 즉각적인 효용을 제공합니다. 키프레임 두 장으로 매끄러운 5초짜리 트랜지션을 만들고, 48kHz 고음질 사운드까지 한 번에 입힐 수 있어 콘셉트 영상 제작의 진입 장벽이 대폭 낮아집니다.
산업 측면에서는 AI 비디오 시장이 '무성 영상' 시대를 지나 '시청각 통합' 단계로 진입했음을 보여줍니다. 런웨이(Runway)나 소라(Sora) 같은 경쟁자들도 영상 생성과 오디오 디자인의 결합 속도를 끌어올려야 하는 압박을 받게 될 것입니다.
다만 최대 생성 길이가 5초에 불과하다는 점은 한계로 남습니다. 숏폼 클립이나 전환 효과용으로는 훌륭하지만, 본격적인 호흡의 서사를 다루기에는 여전히 기존 편집 도구와의 병행이 불가피합니다.
출처 (1)
- techbullion.com(새 탭에서 열림)원문techbullion.com