Stability AI 신규 기능 출시: 프롬프트 없이 이미지 하나로 무한 변형 생성

방 인테리어를 조금 바꿔보고 싶거나 옷 스타일의 다른 조합을 보고 싶을 때, 매번 복잡한 영문 프롬프트를 짜느라 골치를 앓던 이들에게 반가운 소식이 나왔습니다.

Stability AI가 프롬프트 없이 이미지만으로 무제한 변형 이미지를 만들어내는 도구인 Stable Diffusion Reimagine을 자사 플랫폼 Clipdrop을 통해 공개했습니다.

사용 방법은 아주 단순합니다. 텍스트 프롬프트를 일절 입력할 필요 없이, 기준이 될 이미지 하나를 업로드하기만 하면 알고리즘이 원본에서 영감을 얻은 다양한 변형 결과물을 만들어냅니다.

픽셀을 한 개도 베끼지 않는 생성 방식

기존의 이미지 투 이미지(img2img) 기능과 비슷해 보이지만 기술적 구조는 완전히 다릅니다.

원래 Stable Diffusion은 텍스트 인코더를 통해 글자 입력을 조건으로 이미지를 생성하도록 훈련되었습니다. 반면 이번 Reimagine 모델은 텍스트 인코더를 아예 이미지 인코더로 교체했습니다.

입력된 이미지를 인코더로 완전히 변환한 뒤 알고리즘 단계에서 노이즈를 추가해 변형을 주는 원리입니다.

Stability AI 측은 생성기가 원본 이미지의 픽셀을 단 하나도 가져다 쓰지 않는다고 설명했습니다. 원본 이미지를 직접 수정하거나 덧칠하는 게 아니라, 전체적인 맥락과 특징만 파악한 뒤 완전히 새로운 이미지를 그려내는 방식입니다. Clipdrop에 포함된 업스케일러를 쓰면 생성된 이미지의 디테일을 최소 두 배 이상 끌어올릴 수도 있습니다.

제어력의 한계와 안전 필터 문제

글자를 쓸 필요가 없어 편리해진 대신, 결과물의 편차는 감수해야 합니다.

Stability AI 역시 이 기술에 명확한 한계가 있음을 인정했습니다. 어떤 이미지에서는 놀라운 결과물이 나오지만, 다른 이미지에서는 실망스럽거나 부자연스러운 결과가 나오기도 합니다.

부적절한 요청을 차단하기 위한 안전 필터가 내장되어 있지만 오탐이나 미탐 가능성이 남아 있습니다. 가끔 이상한 결과나 편향된 반응을 보일 때도 있어 피드백을 수집 중이며, 이 모델은 조만간 Stability AI의 깃허브를 통해 오픈소스로 공개될 예정입니다.

왜 중요한가

Reimagine의 가장 큰 장점은 프롬프트 엔지니어링이라는 진입 장벽을 완전히 허물었다는 점입니다. 가구나 패션, 무대 디자인을 하는 창작자라면 머릿속 생각을 영어 단어로 번역하느라 씨름할 필요 없이, 사진 한 장을 던져두고 아이디어 스케치를 무한히 뽑아내는 브레인스토밍 도구로 즉시 활용할 만합니다.

기술적으로 원본 이미지의 단일 픽셀도 직접 쓰지 않는다는 점을 내세운 대목도 눈여겨볼 만합니다. 갈수록 민감해지는 저작권 및 이미지 표절 논란을 의식해 법적인 안전장치를 미리 마련해 두려는 계산으로 풀이됩니다.

다만 세부 제어가 불가능하다는 점은 치명적인 약점입니다. 텍스트 지시문이 완전히 빠져 있다 보니 소파 모양은 그대로 두고 벽지 색만 바꾸는 식의 부분 수정이 불가능합니다. 지금 단계에서는 정밀한 작업물 납품용이라기보다는, 초기 방향성을 잡기 위한 영감 탐색용 장난감에 가깝다고 평가할 수 있습니다.