AI 영상의 시점 왜곡 잡고 3D 월드로 복원하는 신기술 공개
AI가 생성한 영상에서 일관된 3D 세계를 재구성하는 기술인 'World Reconstruction from Inconsistent Views'가 공개됐다. 영상 프레임 간의 기하학적 모순과 왜곡을 비강체 정렬로 보정해 단 한 편의 영상으로도 깔끔한 3D 장면을 복원한다. 특정 영상 모델에 구애받지 않고 기존 비디오 생성기를 3D 공간 생성 도구로 탈바꿈시킨다는 점이 핵심이다.
Genie 3
구글, 실시간 탐험 가능한 가상 세계 생성기 '프로젝트 지니' 공개
구글 딥마인드가 세계 모델 지니 3 기반의 실험용 프로토타입 '프로젝트 지니'를 공개했습니다. 텍스트나 이미지를 입력하면 물리 법칙이 적용된 대화형 가상 세계를 실시간으로 구축해 직접 조작하고 탐험할 수 있습니다. 현재는 미국 내 구글 AI 울트라 구독자 대상이며 생성 시간은 60초로 제한됩니다.
구글 딥마인드, 3D 가상 세계용 AI 에이전트 'SIMA 2' 공개
구글 딥마인드가 제미나이(Gemini) 모델을 탑재한 3D 가상 세계용 에이전트 SIMA 2를 발표했습니다. 마우스와 키보드로 게임을 조작하며 복잡한 지시를 추론해 실행하고, 처음 접하는 환경에서도 스스로 학습해 적응합니다. 현재는 연구자와 게임 개발자 대상 한정 프리뷰로 제공됩니다.
‘월드 모델’의 세 갈래 길: 페이페이 리는 3D 에셋, 르쿤은 잠재 두뇌, 딥마인드는 시뮬레이터
테크 분석에 따르면 주요 AI 기업들이 표방하는 ‘월드 모델’의 실체가 서로 크게 다른 것으로 나타났습니다. World Labs의 Marble은 3D 가우시안 스플래팅 에셋 파이프라인에 가깝고, 얀 르쿤은 예측과 계획을 위한 잠재 공간을, DeepMind는 Genie 3 기반의 대화형 영상 시뮬레이터를 개발 중입니다.
스카이워크, 오픈소스 실시간 상호작용 세계 모델 'Matrix-Game 2.0' 공개
Skywork가 실시간 상호작용 오픈소스 세계 모델 Matrix-Game 2.0을 공개했다. 지난주 DeepMind가 공개한 Genie 3가 오픈소스로 풀리지 않은 반면, 이 모델은 25FPS 프레임레이트와 수 분간의 연속 상호작용을 지원하며 완전한 오픈소스로 배포된다.
구글 딥마인드, 텍스트로 실시간 조작 환경 생성하는 세계 모델 ‘Genie 3’ 공개
구글 딥마인드가 범용 세계 모델 'Genie 3'를 발표했다. 텍스트 프롬프트를 입력하면 720p 해상도와 초당 24프레임으로 실시간 탐색 가능한 상호작용 환경을 생성하며, 수 분간 일관성을 유지한다. 텍스트로 날씨 등 돌발 이벤트를 추가할 수도 있으며, 현재는 연구자 대상 프리뷰로 제한 공개됐다.