Domain Shuttle:输入参考图生成视频,多角色跨风格也能保持一致
开源视频生成项目 Domain Shuttle 发布,支持输入多张参考图生成视频并保持主体一致。它能把真人、2D 动漫和 3D 角色放进同一场景互动,还支持通过文本跨风格转换。模型基于 Wan 2.2 构建,权重约 35GB,已在 GitHub 开源代码。
开源视频生成项目 Domain Shuttle 发布,支持输入多张参考图生成视频并保持主体一致。它能把真人、2D 动漫和 3D 角色放进同一场景互动,还支持通过文本跨风格转换。模型基于 Wan 2.2 构建,权重约 35GB,已在 GitHub 开源代码。
研究团队开源了 FPS 交互式世界模型 SCOPE。它基于 Wan2.2 打造,支持移动与开火等 10 自由度控制,能将连续按键操作直接生成为连贯的游戏画面,并支持未知场景的零样本迁移。目前模型权重、代码和数据集均已在 GitHub 开源。
研究团队开源游戏世界模型 ReactiveGWM。它将玩家按键操作与 NPC 策略解耦,允许玩家一边按键出招,一边用提示词指挥对手进攻或防守。模型基于 Wan 2.2 构建且相对轻量,可在本地中高端显卡上运行。
研究人员提出 World Reconstruction from Inconsistent Views,能将 AI 生成视频转化为一致的 3D 世界。它通过非刚性几何对齐消除帧间形变与矛盾,单段视频即可重建,且不挑视频模型。最关键的是,它直接把现有视频生成器变成了可漫游的 3D 场景工具。
robbyant 开源基于 Wan2.2 的世界模拟器 LingBot-World。它支持用文本或图片生成可交互环境,能以 16 FPS、低于 1 秒延迟输出 480P 与 720P 画面,并具备分钟级场景一致的长记忆。代码与权重已公开,为互动生成与机器人学习提供了开源方案。
Higgsfield AI 宣布在其平台上线开源模型 WAN 2.2,同时支持视频与图像生成。平台内置了 30 多种预设效果,支持一键点击渲染,主打更快的生成速度。