Runway 联手英伟达展示实时视频模型:首帧延迟杀入 100 毫秒
本周在 NVIDIA GTC 上,Runway 与 NVIDIA 展示了一款运行在 Vera Rubin 上的实时高清视频模型研究预览。该模型能即时生成高清视频,首帧延迟低于 100 毫秒,并将支撑其通用世界模型 GWM-1。目前这项技术仅为研究预览,尚未正式上线。
本周在 NVIDIA GTC 上,Runway 与 NVIDIA 展示了一款运行在 Vera Rubin 上的实时高清视频模型研究预览。该模型能即时生成高清视频,首帧延迟低于 100 毫秒,并将支撑其通用世界模型 GWM-1。目前这项技术仅为研究预览,尚未正式上线。
据 Variety 报道,独立电影《As Deep as the Grave》利用生成式 AI 完整重现了已故影星 Val Kilmer 的形象与声音。Kilmer 生前因喉癌无法进组,制作方在获得其家属授权并遵循工会规范后,借助家庭影像与后期技术完成出演,成为 AI 伦理合规参演的新案例。
Midjourney 开启 V8 图像模型 Alpha 测试,生成速度比 V7 提升约 5 倍。新版本改进了提示词遵循、文字渲染与画面连贯性,支持原生 2K 分辨率的 --hd 模式。不过,目前该版本暂不支持 Relax 模式。
化名 Kage 的欧洲创作者用 Suno 打造的虚构日本金属乐队 Neon Oni 被网友识破,此前该项目在 Spotify 月听众超 8 万。创作者随后在东京招募 7 位真实乐手将 AI 曲目搬上线下真演,目前已办完三场。这种先用 AI 验证概念热度、再交由真人接棒演出的反向路径,展现了音乐产业的新分工。
NVIDIA 在 GTC 上发布 DLSS 5,称其为 2018 年光线追踪以来最大的图形突破。它利用实时神经渲染模型注入逼真光影与材质,最高支持 4K 实时运行。黄仁勋称其为图形领域的「GPT 时刻」,预计今年秋季正式推出。
AI 项目 Retime GS 亮相。它只需普通 2D 视频帧作为输入,就能生成支持任意视角观看的全身 4D 场景;即使原视频丢帧卡顿,也能通过改进的 4D Gaussian Splatting 补全空缺,比同类方法更流畅、伪影更少。
OpenAI 宣布升级基于 Sora 2 的 Video API。开发者现可生成长达 20 秒的片段,并支持自定义角色与物体、16:9 及 9:16 画幅、场景续写和批量生成任务。这为视频应用的开发流程带来了更高的灵活度与控制力。
据 The Information 报道,OpenAI 计划将 Sora 视频生成器直接集成至 ChatGPT 中。此前 Sora 仅作为独立网页和应用运行。在近期因军方合作引发卸载潮、面临 Claude 激烈竞争的背景下,此举旨在挽回用户,但同时也可能增加算力成本并加剧深伪滥用风险。
Runway 宣布成立内部孵化器 Runway Labs,由联合创始人 Alejandro Matamala Ortiz 领衔。该实验室专注于探索生成式视频与通用世界模型的前沿应用,计划在电影、医疗、教育和游戏等领域快速构建原型产品。Runway 认为 AI 视频已达转折点,正对外招募工程师与前创业者。
腾讯混元团队提出特效定制框架 EffectMaker,能把参考视频中的视觉特效直接克隆到新画面中。它通过多模态大模型与 Diffusion Transformer 双路引导,无需针对单个特效微调,并配套构建了含 13 万条视频的数据集。
Luma 推出创意智能体平台 Luma Agents,由底层统一多模态模型 Uni-1 驱动,支持文本、图像、视频和音频的端到端创作。它不仅具备类似代码智能体的自我反思和纠错迭代能力,还能协同调度 Google Veo 3 与 ElevenLabs 等外部模型。目前该平台已开放 API,并逐步向企业灰度铺开。
AI 视频生成平台 LTX Studio 宣布推出配音与字幕功能,专门面向需要快速制作和本地化视频的企业团队。新能力旨在帮助企业针对不同语言受众调整视频内容。目前官方尚未公布具体支持的语言种类与定价细节。
字节跳动与清华大学团队发布 DreamID-Omni。它能接收图像、文本与参考音频,让虚拟角色用对应原声说话,并解决了多人同屏对嘴混乱的问题,还支持现有视频的换脸换声。团队预计 3 月正式开源。
Google 发布图像生成模型 Nano Banana 2(Gemini 3.1 Flash Image)。新模型兼具 Pro 级的画面质感与 Flash 级的生成速度,支持最多 5 个角色的一致性生成、实时联网检索和 4K 分辨率输出,已直接接入 Gemini、Google 搜索及 API。
QuiverAI 宣布开放矢量图 AI 模型 Arrow 1.0 的公开测试。与常见生成位图的图像模型不同,Arrow 1.0 原生输出可无损缩放、可编辑的 SVG 格式矢量图,主要面向需要素材排版与设计的开发者及设计师。
Google 宣布改版 AI 创作平台 Flow,将 ImageFX 和 Whisk 的生图能力直接并入统一工作区。用户用内置模型生成的图像可直接喂给 Veo 制作视频;新版还加入了套索圈选与自然语言精细化修改,并支持视频内物体增删与运镜控制。
Google 为 Gemini 应用推出视频模板功能。用户在工具菜单选择「Create video」即可挑选赛博朋克、动作英雄等预设风格,还能上传人物或宠物照片直接当主角,并支持 9:16 竖屏输出。用户不再需要手写复杂提示词,降低了做短视频的门槛。
Replit 推出视频创作工具 Replit Animation。该工具底层由 Gemini 3.1 Pro 驱动,主打用「Vibecode」在几分钟内做出爆款视频,官方演示片全程由其生成。说白了,Replit 正在把写代码的交互体验直接搬到多媒体视频创作上。
AMC 影院宣布拒绝在映前贴片时段播放 AI 动画短片《Thanksgiving Day》。该片此前获 AI 电影节大奖并原定在全美影院展映两周,但消息曝光后引发强烈抗议,AMC 随后紧急声明退出。传统院线试水 AI 内容正遭遇巨大的观众阻力。