엔비디아의 GauGAN2: 거친 스케치와 텍스트로 완성하는 실사 풍경화
엔비디아 연구팀이 선보인 GauGAN2는 대략적인 스케치와 텍스트 입력을 조합해 실사 풍경화를 생성하는 도구다. 1000만 장의 풍경 사진을 학습해 분할 맵과 브러시로 산이나 호수를 직접 수정할 수 있으며, 콘셉트 아트나 스토리보드를 빠르게 구상하기에 유용하다.
엔비디아 연구팀이 선보인 GauGAN2는 대략적인 스케치와 텍스트 입력을 조합해 실사 풍경화를 생성하는 도구다. 1000만 장의 풍경 사진을 학습해 분할 맵과 브러시로 산이나 호수를 직접 수정할 수 있으며, 콘셉트 아트나 스토리보드를 빠르게 구상하기에 유용하다.
'Sarah's Scribbles'의 작가 사라 앤더슨이 AI 화풍 복제로 인한 고통을 토로했다. 이름만 프롬프트에 넣으면 몇 초 만에 자신의 스타일을 베낀 그림이 완성되는 현실을 마주하며, 오랜 세월 구축해 온 예술의 인간성을 AI가 지워버렸다고 비판했다.
스타트업 Poly가 텍스트 프롬프트로 3D 텍스처를 생성하는 AI 툴을 선보였다. 물리 기반 렌더링 맵을 지원해 게임 개발자와 디자이너의 에셋 제작을 돕는다. Y Combinator 등으로부터 390만 달러 투자를 유치했으며 200만 개 이상의 텍스처를 생성했다.
AI 생성 예술의 가치와 윤리적 과제를 다룬 글이 공개되었다. 글에서는 AI가 인간의 고유성을 대체할 수 없으며, 아이디어를 자극하고 창작 과정을 보조하는 도구로 바라보아야 한다고 제안했다. 일자리 위협과 감정적 깊이 결여에 대한 우려도 균형 있게 짚었다.
디지털 창작 플랫폼 픽스아트가 생성형 AI 기능 ‘AI 아바타’를 선보였다. 사용자가 몇 장의 셀카를 앱에 올리면 애니메이션, 슈퍼히어로 등 다양한 스타일의 초상화를 생성해 주며, 배경 제거와 화질 개선 같은 기존 편집 툴을 활용한 추가 편집도 가능하다.
브리검 여성병원과 보아지치대 연구진은 수술 중 채취한 급속 동결 조직 이미지를 표준 파라핀 박절(FFPE) 수준의 고품질로 변환하는 AI 모델을 발표했다. 뇌종양과 폐암 등의 아형 분류 정확도를 몇 분 만에 대폭 높여줄 수 있으며, 실제 임상 적용을 위한 추가 시험이 진행될 예정이다.
딥러닝이 메타버스의 핵심 인프라로 자리 잡고 있다. 시선 추적과 3D 재구성뿐 아니라 메타의 실시간 음성 번역, 사전 작성된 대사를 벗어난 생성형 챗봇 기반 브랜드 대표가 가상 공간에 도입되고 있다. 가상 세계에서의 원활한 상호작용을 AI가 이끌고 있다.
현대 이미지 생성 AI의 핵심 기술인 디퓨전 모델의 발전 과정과 작동 원리가 조명됐다. 비평형 열역학에서 착안한 이 기술은 노이즈로부터 데이터를 복원하는 역과정을 학습하며, 오픈AI의 CLIP과 결합해 정밀도를 대폭 끌어올렸다. 최근에는 예술 창작을 넘어 작곡과 신약 단백질 설계 등 생명공학 분야로 영역을 넓히고 있다.
크라우드펀딩 플랫폼 킥스타터가 AI 성인물 생성 프로젝트 Unstable Diffusion의 모금 캠페인을 중단했다. 867명의 후원자로부터 모인 5만 6,000달러는 전액 환불 처리된다. 예술계의 거센 반발 속에서 킥스타터는 저작권 침해 및 유해성 위험이 있는 AI 프로젝트의 가이드라인을 재검토하고 있다.
OpenAI는 단일 GPU에서 몇 분 만에 단순한 3D 객체를 생성하는 Point-E를 공개했다. 텍스트 투 이미지 확산 모델로 합성 뷰를 만든 뒤 3D 포인트 클라우드로 변환하며, 유사 AI보다 1~2개 자릿수 더 빠르다.
12월, '스텔피(Stelfie)'라는 익명 창작자가 스테이블 디퓨전과 드림부스를 활용해 사실적인 '시간 여행 셀카' 시리즈를 제작했다. 가상의 고정 인물을 고대 이집트 피라미드 건설 현장이나 다빈치의 아틀리에 등에 자연스럽게 합성해, 미세조정 기술로 캐릭터 일관성을 유지하는 독창적인 시각적 스토리텔링을 보여줬다.
프레젠테이션 제작 도구 톰(Tome)이 GPT-3와 DALL-E 2를 연동한 AI 기능을 출시했다. 입력창에 발표 주제를 입력하면 개요와 본문 텍스트는 물론 관련 이미지까지 포함된 슬라이드 초안을 몇 초 만에 자동으로 만들어 준다. 현재 베타 기간 동안 무료로 체험할 수 있으며 기획 단계의 부담을 크게 덜어준다.
리페이스(Reface) CEO는 포브스 기고를 통해 생성형 AI가 창작 생태계와 기업 비즈니스에 미치는 영향을 분석했다. 드림스튜디오가 한 달 만에 100만 사용자를 모으는 등 확산세가 가파른 가운데, 그는 저작권 논란 속에서도 기업이 고객을 직접 창작자로 만드는 AI 도입 전략을 세워야 한다고 조언했다.
스탠퍼드대 AIMI 연구진은 오픈소스 스테이블 디퓨전을 파인튜닝해 병변이 묘사된 흉부 X선 영상을 합성하는 데 성공했다고 발표했다. 막대한 전용 컴퓨팅 비용 없이도 의료 합성 데이터를 생성해 희귀 질환 훈련 데이터 부족을 메울 수 있음을 보여줬다.
공개된 Stable Diffusion 2.0에 3D 깊이 정보를 추론해 이미지를 생성하는 'depth2img' 기능이 추가됐다. MiDaS 모델을 통해 단일 2D 이미지의 3D 형태를 유지하므로, 3D 아티스트가 간단한 그레이박스 모델링만으로 구도 왜곡 없이 다양한 텍스처와 조명 콘셉트를 실험할 수 있다.
Text-CAD가 자연어 모델링부터 하드웨어 제조까지 전 과정을 하나로 연결했습니다. 11개 스킬을 통해 STEP 생성, step.parts의 1.6만 개 이상 오픈소스 부품 검색, Bambu 3D 프린터 슬라이싱까지 지원합니다. 모델이 복잡한 지오메트리 대신 Python 코드를 작성하도록 해 생성물의 기하학적 정밀도를 검증 가능하게 만들었습니다.