메타, 셔터스톡과 파트너십 확대: 수백만 건의 이미지·음악으로 AI 학습
메타와 셔터스톡이 파트너십 확대를 발표하며 메타가 셔터스톡의 수백만 건에 달하는 이미지, 비디오, 음악 라이브러리를 자사 AI 모델 학습과 평가에 활용하기로 했다. 셔터스톡은 데이터 학습에 기여한 창작자에게 보상을 제공하는 체계를 강조하며 저작권 리스크를 줄인 합법적 데이터 공급을 내세웠다.
메타와 셔터스톡이 파트너십 확대를 발표하며 메타가 셔터스톡의 수백만 건에 달하는 이미지, 비디오, 음악 라이브러리를 자사 AI 모델 학습과 평가에 활용하기로 했다. 셔터스톡은 데이터 학습에 기여한 창작자에게 보상을 제공하는 체계를 강조하며 저작권 리스크를 줄인 합법적 데이터 공급을 내세웠다.
배우이자 Mint Mobile 소유주인 라이언 레이놀즈가 최신 브랜드 광고 대본 작성에 AI를 활용했다. 제작비를 아껴 소비자에게 혜택을 돌려준다는 브랜드 콘셉트에 맞춘 시도로, AI 기술을 둘러싼 윤리적 논란 속에서도 특유의 유머를 담아 저비용 마케팅을 선보였다.
영국 ITV의 신작 코미디 'Deep Fake Neighbour Wars' 제작 과정이 공개됐다. StudioNeural의 AI 기술로 무명 배우들의 얼굴을 유명 인사로 합성해 일상적 갈등을 다룬다. 기술적 한계로 배우가 정면을 유지해야 하며, 1월 26일 ITVX에서 공개된다.
MIT CSAIL 연구진은 비디오, 오디오, 텍스트 간 공통 개념을 학습하는 표현 학습 기법을 공개했다. 공유 임베딩 공간에서 1000개의 단어 벡터만을 활용해 비디오 속 동작을 식별하고 검색 정확도와 설명 가능성을 높였다. 인간처럼 세상을 인지하는 로봇 개발에 기여할 수 있으나, 현재는 한 번에 두 가지 모달리티만 처리 가능하다.
엔비디아가 CES 2023에서 웹 브라우저 동영상을 AI로 4K 업스케일링하는 'RTX Video Super Resolution'을 공개했다. 오는 2월부터 RTX 30 및 40 시리즈 그래픽카드를 탑재한 PC의 크롬과 엣지 브라우저에서 1080p 영상을 4K로 향상해 준다. RTX 20 시리즈와 파이어폭스 지원 여부는 아직 불투명하다.
엔비디아가 가상 비서 및 디지털 휴먼 제작을 위한 클라우드 네이티브 AI 마이크로서비스 '옴니버스 ACE'의 얼리 액세스를 시작했다. 음성 기반 표정 생성 도구인 Audio2Face와 Riva 음성 합성을 결합해 언리얼 엔진의 메타휴먼 및 레디 플레이어 미 캐릭터와 연동된다. 복잡한 로컬 파이프라인 없이도 클라우드에서 손쉽게 고품질 3D 아바타를 배포할 수 있다.
딥브레인AI가 2022년 말 고인의 사진과 영상, 사전 인터뷰 데이터를 활용해 가상 인간으로 복원하는 유료 서비스 '리메모리'를 시작했다. 영상 합성 및 대화형 AI 기술로 음성과 표정을 재현하며, 전용 쇼룸에서 30분간 실시간 영상 통화 형태의 재회 경험을 제공한다.
AI 영상 제작 플랫폼 Synthesia가 축구 스타 리오넬 메시의 5분 분량 영상을 기반으로 유창한 영어 등 최대 10개 언어를 구사하는 합성 영상을 선보였다. 평소 공개 석상에서 영어를 쓰지 않던 메시의 입모양과 음성이 자연스럽게 일치해 놀라움을 샀다. 딥러닝 기반 다국어 아바타 기술의 진보를 체감케 한다.
전 메타 엔지니어가 숏폼 영상 자동 생성 도구 '퀵비드(QuickVid)'를 선보였다. 사용자가 프롬프트를 입력하면 GPT-3로 대본을 쓰고, 달리 2로 이미지를 생성하며, 구글 음성합성과 스톡 영상을 조합해 틱톡과 유튜브 쇼츠용 영상을 자동으로 완성한다. 제작 문턱을 낮췄지만 스팸 양산 우려도 나온다.
Flawless와 Papercup 등 AI 기업들이 배우의 입모양 수정, 합성 음성 더빙, 스턴트 대역 구현 기술을 선보였다. 재촬영 비용 절감과 글로벌 진출에 유용하지만 배우의 동의권과 초상권 침해에 관한 윤리적 우려도 커지고 있다.
'사우스 파크' 제작자 트레이 파커와 맷 스톤이 설립한 AI 엔터테인먼트 스타트업 딥 부두(Deep Voodoo)가 커넥트 벤처스의 주도로 2000만 달러 투자를 유치했다. 이번 첫 외부 자금을 바탕으로 영화 및 영상 업계를 위한 저비용·고속 AI 얼굴 교체 및 시각효과(VFX) 기술 개발을 본격화한다.
리페이스(Reface) CEO는 포브스 기고를 통해 생성형 AI가 창작 생태계와 기업 비즈니스에 미치는 영향을 분석했다. 드림스튜디오가 한 달 만에 100만 사용자를 모으는 등 확산세가 가파른 가운데, 그는 저작권 논란 속에서도 기업이 고객을 직접 창작자로 만드는 AI 도입 전략을 세워야 한다고 조언했다.