사진 여러 장으로 탐험 가능한 3D 장면 만드는 'InfiniSplat v2' 오픈소스 공개
다각도 사진이나 주행 영상을 자유롭게 탐험 가능한 3D 장면으로 변환하는 'InfiniSplat v2'가 공개됐다. 3D 기하 구조와 시각 효과 예측을 분리해 오류 영역을 걸러내고 정밀도를 대폭 끌어올렸다. 모델 크기는 약 6.6GB로 코드와 가중치가 모두 공개되어 일반 소비자용 GPU에서도 로컬 실행이 가능하다.
Llama, Qwen, DeepSeek 등 오픈소스·오픈 웨이트 모델과 주목할 만한 데이터셋, 프레임워크, 개발 도구.
다각도 사진이나 주행 영상을 자유롭게 탐험 가능한 3D 장면으로 변환하는 'InfiniSplat v2'가 공개됐다. 3D 기하 구조와 시각 효과 예측을 분리해 오류 영역을 걸러내고 정밀도를 대폭 끌어올렸다. 모델 크기는 약 6.6GB로 코드와 가중치가 모두 공개되어 일반 소비자용 GPU에서도 로컬 실행이 가능하다.
Fish Audio가 차세대 오픈소스 음성 모델 Drama 3을 공개했다. 35B 파라미터 MoE 기반으로 하나의 텍스트에서 최대 16명의 서로 다른 캐릭터 목소리를 구현할 수 있다. 한숨이나 웃음 같은 감정 태그는 물론, 전체를 다시 만들 필요 없이 틀린 단어만 자연스럽게 수정하는 편집 기능도 지원한다.
텐센트와 홍콩대 연구진이 가상 환경에서 다수의 플레이어가 상호작용하는 월드 모델 'Multix'를 공개했다. 플레이어별 시점을 개별 생성하면서 환경과 움직임을 실시간 동기화하며, 계층형 통신을 통해 연산 비용을 86% 이상 줄였다. 4인 데이터 학습만으로 10인까지 확장된다.
개발자 브랜든 토머스가 앤트로픽의 Opus 5.5 모델을 사용해 MS 오피스를 리버스 엔지니어링하고, 오픈소스 복제 앱인 WordCraft, GridCraft, DeckCraft를 공개했습니다. macOS, 윈도우, 리눅스를 지원하며 기본 앱은 무료이지만 제품 내 생성형 AI 기능은 유료 구독제입니다.
Skywork 가 실시간 플레이 가능한 3D 게임 월드 모델 Matrix Game 4.0 을 오픈소스로 공개했다. 물리 엔진이 규칙과 움직임을 처리하고 AI 가 그래픽을 실시간 고화질로 덧입히는 방식으로, 단일 소비자용 GPU 에서 최대 83fps 를 낸다. 화면 왜곡 문제를 해결하고 자연어로 게임 코드를 수정하는 에이전트도 포함했다.
오픈소스 호환 레이어 d2r-mobile이 공개되어 소유 중인 닌텐도 스위치용 '디아블로 II: 레저렉션'을 iPhone, iPad, Mac 및 안드로이드에서 네이티브로 구동할 수 있게 됐다. 에뮬레이터 없이 원본 코드를 직접 실행해 60fps 고정과 터치 조작을 지원한다.
엔비디아가 MiniMax H3 기반의 'Stream Render H3' 모델과 코드를 공개했다. 게임 엔진의 단순한 색상 시맨틱 맵을 받아 실시간으로 영화 수준의 비주얼을 생성하며 참조 이미지로 스타일 변경도 지원한다. 다만 실시간 구동에는 GP200 GPU 8장과 200GB 이상의 용량이 필요하다.
몇 장의 사진만으로 완전한 3D 에셋을 복원·생성하는 UniForge 3D의 코드와 모델이 공개됐다. 보이는 부분을 정밀하게 재구성하는 과정과 보이지 않는 영역을 생성 모델로 채우는 과정을 결합해 원본 디테일을 유지하며 누락된 형상을 완성한다.
3D 재구성 모델 Pure가 오픈소스로 공개됐다. 값비싼 3D 라벨 데이터 없이도 일반 동영상에서 깊이와 움직임 정보를 추출해 사후 학습을 진행하며, 동적 장면을 3D 공간으로 복원한다. 전체 용량이 13.2GB로 가볍고 학습 스크립트도 함께 제공되어 로컬 환경에서 직접 실행해볼 수 있다.
Google Research는 에이전트 최적화 프레임워크 Harness²를 오픈소스로 공개했다. 모델 가중치를 건드리지 않고 프롬프트와 도구 지침 등 8개 외곽 요소를 이중 재귀 방식으로 자동 튜닝해 Gemini 3.5 Flash 등의 벤치마크 점수를 최대 11.5점 끌어올린다.
리버스 엔지니어링 분석을 AI 에이전트에 통합하는 오픈소스 도구 REA 가 공개됐다. 네이티브 바이너리부터 일렉트론, APK 까지 로컬에서 분석하며, 단순 추론이 아닌 어셈블리 명령어와 호출 체인 등 실제 증거 기반으로 결과를 제시한다.
코파일럿킷이 챗GPT의 동적 인터페이스 생성 기능을 자체 앱에 구축할 수 있는 오픈소스 '오픈 인텔리전트 UI'를 공개했다. 에이전트가 작업에 맞춰 샌드박스 내 대화형 위젯을 실시간 생성하거나 기존 컴포넌트를 호출한다. 특정 모델에 얽매이지 않고 고유 디자인 시스템을 유지할 수 있는 점이 핵심이다.
메타는 일반 사진이나 영상을 완전한 3D 오브젝트로 변환하는 'GenIA'를 공개했다. 기존 SAM 3D 모델에 입력 정렬 검증 메커니즘을 추가해 외형과 위치 오차를 실시간으로 보정한다. 비상업적 라이선스로 코드가 공개되어 로컬 환경에서 직접 실행해 볼 수 있다.
텍스트 명령어로 음악을 만들고 음표 단위로 편집할 수 있는 오픈소스 앱 'Tonefold'가 출시됐다. Claude나 로컬 Ollama 모델을 활용해 멜로디, 코드, 드럼 등 11개 트랙을 피아노 롤에 생성한다. 완곡 오디오 대신 수정 가능한 노트와 MIDI 형태로 제공돼 사용자가 세부 파트를 손쉽게 다듬을 수 있다.
개발자 브랜든 토마스(Brandon Thomas)가 Claude Opus 5.5를 활용해 포토샵 등 어도비의 핵심 7개 소프트웨어를 러스트(Rust)로 재구현한 오픈소스 제품군을 공개했다. MIT/아파치 라이선스로 로컬 실행을 지원한다. 복잡한 PSD 호환과 플러그인 등에는 아직 한계가 있지만, 고가 독점 소프트웨어의 장벽을 허무는 시도로 기대를 모으고 있다.
리퀴드 AI가 3.1B 규모의 멀티모달 의사결정 모델 'd1-3B'를 오픈소스로 공개했다. 텍스트를 길게 생성하는 대신 단 한 번의 패스로 분류 및 판단 결과를 도출하며, RTX 4090에서 8ms, 엣지 기기인 젯슨 오린 나노에서도 50ms 만에 응답한다.
Musubi가 콘텐츠 검열 분류 모델 PolicyLM-1.7B를 Apache 2.0 라이선스로 오픈소스 공개했습니다. 기존 분류기와 달리 매 메시지마다 사용자 지정 정책을 동적으로 판독해 재학습 없이 룰을 즉시 반영하며, L4 GPU 기준 35ms의 빠른 지연 시간으로 실시간 채팅과 AI 안전 가드레일에 적합합니다.
구글이 멀티모달 임베딩 모델 ‘임베딩젬마 2’를 아파치 2.0 라이선스로 공개했다. 7억 4천만 파라미터 크기로 텍스트, 코드, 이미지, 영상, 오디오를 단일 임베딩 공간에 매핑한다. 픽셀 11 프로 기준 567MB RAM으로 구동돼 완전한 오프라인 온디바이스 RAG 파이프라인 구축을 지원한다.
텍스트로 인체 동작을 생성하는 오픈소스 모델 MotionSpaceFlow가 공개됐다. 모델 크기는 약 1.1GB로 일반 GPU에서 구동할 수 있다. 가장 주목할 점은 추가 학습 없이도 특정 프레임의 관절 위치를 고정하면 AI가 이에 맞춰 전체 동작을 완성한다는 것이다.
리플렉션 AI가 코딩과 에이전트 작업을 위한 501B 오픈 모델 'Beam'을 발표했다. 23B 활성 파라미터의 MoE 구조로 10.5K대의 엔비디아 GB300으로 강화학습을 거쳤다. GLM 5.2 수준의 성능을 내면서도 추론 연산량은 3~4배 적다. 모델 가중치는 이달 말 공개된다.