트웰브랩스, 영상 이해 파운데이션 모델 '페가수스-1' 공개
트웰브랩스가 영상 언어 파운데이션 모델 페가수스-1을 발표하고 비디오-텍스트 생성 API를 공개했다. 영상을 여러 장의 이미지로 쪼개는 대신 시각과 음성을 함께 분석해 긴 동영상의 요약, 챕터 생성, 보고서 작성을 지원한다.
AI 동영상
최신 소식 보기
D-ID 모바일 앱 출시: 사진 한 장과 텍스트로 말하는 AI 영상 제작
D-ID가 iOS와 안드로이드용 모바일 앱을 정식 출시했다. 사진을 올리고 대본을 입력하면 119개 언어와 감정 톤을 지원하는 최대 10분 길이의 말하는 영상을 스마트폰에서 바로 생성할 수 있다. 구독료는 월 5.99달러부터 시작하며 14일 무료 체험이 제공된다.
디스크립트, AI 영상 편집 어시스턴트 '언더로드' 출시
디스크립트가 영상 및 팟캐스트 편집을 돕는 AI 어시스턴트 '언더로드'를 선보였다. 대본과 영상을 파악해 화자 중앙 배치, 자막 삽입, 잡음 제거 등 번거로운 작업을 대화형 지시로 대신 처리해 준다. 무료 요금제에서도 월 1시간 분량까지 바로 사용해 볼 수 있다.
일레븐랩스, 픽토리 AI와 제휴…영상 제작에 고품질 AI 음성 지원
일레븐랩스가 비디오 생성 플랫폼 픽토리 AI와의 파트너십을 발표했다. 픽토리 사용자는 텍스트나 블로그 글을 영상으로 변환할 때 일레븐랩스의 자연스러운 AI 음성을 내레이션으로 입힐 수 있으며, 우선 영어와 독일어 콘텐츠를 지원한다.
미 상원 '노 페이크 법안' 초안 발표: 무단 AI 복제 금지에 SAG-AFTRA 전폭 지지
미국 초당파 상원의원들이 당사자 동의 없는 AI 음성·외모 복제를 금지하는 '노 페이크 법안(No Fakes Act)' 초안을 공개하자, 미 배우조합(SAG-AFTRA)이 즉각 환영했다. 제작사가 생성형 AI 복제본으로 보조출연자 등의 일자리를 대체하려는 움직임을 연방 차원에서 차단하는 것이 핵심이다.
어도비, 실험적 생성형 AI 기술 11종 공개: 동영상 생성형 채우기부터 스마트 드레스까지
어도비는 MAX 스닉스 세션에서 차세대 생성형 AI 실험 기술 11가지를 공개했다. 텍스트 프롬프트로 단일 프레임을 수정하면 전체 동영상에 반영되는 패스트 필(Fast Fill)과 실시간 패턴이 바뀌는 드레스 프림로즈(Primrose) 등이 주목받았다. 연구 단계의 프로젝트로, 향후 제품 탑재가 기대된다.
틱톡, 어도비 앱·캡컷에서 완성 영상 바로 올리는 '다이렉트 포스트' 출시
틱톡이 서드파티 편집 앱에서 플랫폼으로 영상을 바로 게시할 수 있는 '다이렉트 포스트' 기능을 출시했다. 어도비 프리미어 프로, 어도비 익스프레스, 캡컷 등이 초기 파트너로 참여했다. 편집 툴 안에서 캡션과 공개 설정을 마친 뒤 원클릭으로 올릴 수 있어 번거로운 내보내기 과정이 사라진다.
미국작가조합 파업 종료: 대본 집필 시 AI 강제 사용 금지 등 규제 합의
미국작가조합(WGA)이 5개월간의 파업을 종료했다. 새롭게 마련된 3년 계약에는 엄격한 생성형 AI 규제가 담겨, 제작사가 작가에게 ChatGPT 등 AI 도구 사용을 강제할 수 없으며 AI 생성물을 원작으로 인정하지 않기로 했다. 창작 산업에서 AI 도입의 중요한 기준선이 마련됐다.
YouTube, 쇼츠용 AI 배경 생성 기능과 무료 편집 앱 공개
YouTube가 텍스트 프롬프트만으로 쇼츠에 들어갈 AI 동영상 및 이미지 배경을 만들어 주는 실험적 기능 '드림 스크린'을 공개했습니다. 이와 함께 자동 자막과 비트 매칭 기능을 갖춘 무료 모바일 영상 편집 앱 'YouTube Create' 베타 버전도 선보였습니다. 드림 스크린은 연내 일부 크리에이터를 대상으로 테스트를 시작합니다.
메타피직, 톰 행크스 등 헐리우드 스타들의 AI 초상권 관리 플랫폼 공개
생성형 AI 기업 메타피직이 배우의 얼굴과 음성 등 개인 데이터를 관리하는 플랫폼 '메타피직 프로'를 발표했습니다. 톰 행크스와 앤 해서웨이 등이 초기 사용자로 참여했습니다. 헐리우드에서 AI 권리 분쟁이 커지는 가운데, 배우가 디지털 분신의 권리와 보상을 직접 통제하도록 돕는 시도입니다.
어도비, 프리미어 프로·애프터 이펙트에 음성 개선 등 AI 기능 대거 추가
어도비가 프리미어 프로와 애프터 이펙트 베타 버전에 신규 AI 기능을 공개했다. 프리미어 프로에는 잡음을 제거하는 음성 향상 기능과 대화 속 추임새 일괄 삭제 기능이 추가됐고 타임라인 속도도 5배 빨라졌다. 애프터 이펙트는 AI 로토 브러시를 개선했다. 현재 베타에서 이용할 수 있으며 올가을 정식 출시된다.
구글 애즈, 유튜브 영상 광고용 AI 크리에이티브 가이드 및 15개국어 AI 내레이션 지원
구글이 구글 애즈에 AI 기반 크리에이티브 가이드 기능을 도입했다. 영상 시작 5초 내 로고 노출 여부, 화면 비율, 영상 길이를 AI가 자동으로 분석해 수정 방안을 안내한다. 또한 15개 언어를 지원하는 AI 음성 생성 도구를 에셋 라이브러리에서 바로 활용할 수 있다.
모토리카, 확산 모델 기반 3D 캐릭터 애니메이션 툴 'MoGen' 공개 베타 시작
스웨덴 기업 모토리카가 확산 모델을 활용한 AI 캐릭터 애니메이션 도구 'MoGen'의 공개 베타를 시작했다. 150개 이상의 스타일로 학습되어 3D 모션을 빠르게 생성하며, 마야, 블렌더, 언리얼 엔진 5 등 FBX 호환 소프트웨어에서 경로를 손쉽게 수정할 수 있다.
StableVideo 오픈소스 공개: 확산 모델 기반 텍스트 주도 일관적 비디오 편집
2023년 8월, 연구팀이 ICCV 2023 논문 프로젝트 StableVideo의 코드를 공개했다. ControlNet과 Text2LIVE를 기반으로 프레임 간 일관성을 유지하는 텍스트 기반 비디오 편집을 지원하며, 메모리 최적화를 통해 약 14GB VRAM 환경에서도 로컬 실행이 가능하다.
아마존, NFL 중계에 AI 도입: 블리츠·패스 타깃 실시간 예측
아마존이 프라임 비디오의 NFL '서스데이 나이트 풋볼' 중계에 새로운 AI 예측 기능을 도입한다. 자체 신경망을 통해 선수 위치와 가속도를 분석해 수비의 블리츠를 예측하고, 패스를 받을 수 있는 오픈 리시버를 실시간 표시한다. 해당 기능은 9월 14일 2023 시즌 개막과 함께 프라임 비전 스트림에서 제공된다.
일레븐랩스, 사이언스캐스트와 맞손: arXiv 논문을 나레이션 영상으로 요약
ElevenLabs가 과학 영상 플랫폼 ScienceCast 및 arXiv와의 협업을 발표했다. ScienceCast의 영상 자동 생성 도구에 ElevenLabs의 AI 음성 기술을 접목해, arXiv에 올라온 논문을 3~5분 분량의 나레이션 요약 영상으로 손쉽게 변환해 준다.
런웨이, AI 영상 플랫폼 '와치' 출시…CEO "헐리우드 담론 정교해져야"
런웨이가 자사 생성형 AI 툴로 만든 장편 영상을 공유하고 감상할 수 있는 신기능 '와치(Watch)'를 웹사이트와 iOS 앱에 선보였다. 헐리우드 파업으로 AI에 대한 반발이 이어지는 가운데, 크리스토발 발렌주엘라 CEO는 AI가 창작을 대체하기보다 확장할 것이라며 실제 성과를 조명하기 위해 마련했다고 설명했다.
D-ID, 일레븐랩스와 파트너십…AI 아바타 영상에 고품질 음성 탑재
D-ID와 일레븐랩스가 파트너십을 맺고, D-ID의 영상 제작 플랫폼 '크리에이티브 리얼리티 스튜디오'에 고품질 AI 음성을 도입했다. Pro 구독자는 한 번의 클릭으로 9가지 프리미엄 음성과 4가지 감정 표정을 아바타에 적용해 한층 자연스러운 영상을 제작할 수 있다.
유튜브, AI 동영상 요약 기능 테스트…검색·재생 화면에 표시
유튜브가 검색 및 시청 화면에 AI가 생성한 동영상 요약을 띄우는 테스트를 시작했다. 영상을 볼지 빠르게 판단할 수 있도록 돕는 기능으로, 현재 모바일 기기에서 일부 영어 튜토리얼, 쇼핑, 브이로그 영상에 한해 제공된다. 크리에이터의 기존 설명란을 대체하지는 않는다.
헐리우드 파업 확산 속, 넷플릭스 90만 달러 연봉 내걸고 AI 인재 채용
외신에 따르면 넷플릭스가 머신러닝 플랫폼 프로덕트 매니저 채용 공고를 내걸었으며 최고 연봉은 90만 달러에 달한다. 영화 및 드라마 제작 최적화가 주 목표다. 배우·작가 조합이 AI 규제를 요구하며 파업 중인 상황에서 제작사들의 AI 투자는 오히려 가속화되고 있다.