루마랩스, 드림머신에 자연어 영상 편집 기능 'Modify with Instructions' 출시

영상을 완성한 뒤 소품을 바꾸거나 배경을 수정해야 할 때, 기존에는 복잡한 마스킹 작업을 거치거나 생성형 AI로 전체 영상을 처음부터 다시 뽑아야만 했습니다. 원하는 장면을 얻기 위해 프롬프트 뽑기를 반복하는 일은 제작자의 큰 골칫거리였습니다.

루마랩스가 자사 영상 생성 툴인 드림머신에 자연어 편집 기능인 'Modify with Instructions'를 출시했습니다. 모든 유료 구독자는 이제 일상적인 문장 입력만으로 영상 속 사물 교체, 의상 변경, 가상 배경 수정 작업을 수행할 수 있습니다.

프레임 하나 지정하고 텍스트 입력하면 끝

작업 방식은 직관적입니다. 수정하려는 대상이 뚜렷하게 보이는 프레임을 하나 선택한 뒤, "빨간 드레스를 파란 수트로 바꿔줘" 또는 "커피잔을 와인잔으로 교체해줘" 같은 간단한 프롬프트를 입력하면 됩니다.

드림머신은 입력된 의도를 파악해 클립 전체에 걸쳐 해당 수정을 일관되게 적용합니다. 불필요한 물체 제거, 가상 날씨 변경, 광고용 가상 제품 배치, 의상 및 소품 교체 등 다양한 VFX와 영상 기획 워크플로를 포괄합니다.

3단계 강도 조절과 현재의 사용 한계

사용자는 강도 조절 슬라이더를 통해 원본 유지와 AI 상상력 사이의 균형을 맞출 수 있습니다. 세부 묘사를 유지하는 Adhere, 유연하게 변형하는 Flex, 장면을 새롭게 재해석하는 Reimagine의 세 단계로 나뉩니다.

다만 초기 기능인 만큼 명확한 기술적 제약도 존재합니다. 수정 명령이 정확히 적용되려면 변경하려는 대상이 영상의 첫 번째 프레임에 반드시 등장해야 합니다. 대상이 중간에 나타나는 영상은 인식이 어려울 수 있습니다.

화면 비율 역시 9:16, 3:4, 1:1, 4:3, 16:9, 21:9 등 6가지 규격만 지원합니다. 지원 목록 외의 비율을 업로드할 경우 자동으로 크롭 및 변환되면서 화질 저하가 발생할 수 있습니다.

왜 중요한가

영상 크리에이터와 광고 제작자에게 가장 큰 혜택은 수정 비용의 대폭적인 절감입니다. 이전에는 작은 소품 하나를 바꾸기 위해 전체 컷을 버려야 했지만, 이제는 타깃을 좁혀 수정할 수 있어 프로토타입 제작 효율이 크게 높아집니다.

생성형 AI 영상 시장의 판도 또한 '무엇을 만들 수 있는가'에서 '얼마나 정밀하게 제어할 수 있는가'로 빠르게 이동하고 있습니다. 런웨이나 피카 같은 경쟁사들 역시 자연어 기반 국소 편집 기능 도입에 속도를 낼 수밖에 없는 구도입니다.

루마랩스가 복잡한 전문 편집 툴 없이 텍스트만으로 일관성 있는 비디오 수정을 구현한 점은 매우 영리한 접근입니다. 그러나 대상이 첫 프레임에 반드시 존재해야 한다는 조건은 시간 연속성 제어가 아직 완전하지 않음을 보여줍니다. 지금 단계에서는 프로덕션 전체를 대체하기보다 신속한 콘셉트 수정용 보조 도구로 활용하는 것이 적합합니다.