Pika 开源音视频模型 H3 Flex:仅需 6 步采样,音画同步生成
Pika 在 GitHub 开源音视频生成模型 Pika H3 Flex。模型基于 MiniMax-H3 训练,只需 6 步采样就能同步生成 5 至 15 秒带立体声的视频,支持 11 种画幅和最多 12 个多模态参考文件。最值得关注的是它的推理效率大幅提升,单张 H100 即可本地运行。
Pika 在 GitHub 开源音视频生成模型 Pika H3 Flex。模型基于 MiniMax-H3 训练,只需 6 步采样就能同步生成 5 至 15 秒带立体声的视频,支持 11 种画幅和最多 12 个多模态参考文件。最值得关注的是它的推理效率大幅提升,单张 H100 即可本地运行。
Pika 推出 Pika Audio 系列四款音频基础模型,涵盖视频音效同步 Soundtrack、音乐生成 Music、音效生成 SFX 以及语音合成 Speech。官方称其推理成本大幅降低,价格最高比同类竞品便宜 20 倍,目前已通过 Pika API Club 开放。
Pika Labs 宣布推出全新音频驱动表演模型。该模型支持近乎实时的超逼真面部表情渲染,任意长度与风格的高清视频均能在 6 秒内生成,速度提升 20 倍且成本降低 20 倍。该功能即将上线 Pika 社交应用。
Pika Labs 宣布正在打造首款纯 AI 社交视频应用,底层基于高表现力的人体视频模型。该应用此前已完成数周内测,目前正式开放 iOS 早期访问。用户下载 App 后可加入候补名单,有邀请码则能直接免排队体验。
Pika 推出全新「Pikaffects」发型特效,上线 Web 端与 iOS App。新功能支持把画面人物一键换成粉发、超长发甚至直接变成光头。这让视频趣味变形特效变得更接地气,随手就能做出恶搞或创意视觉效果。
Pika 推出了一项名为 Flashback 的新功能,能让用户在生成视频中与年轻时的自己相遇。这一玩法直接瞄准了怀旧向的视频创作,目前已在网页端和 iOS 端同步开放体验。
Pika Labs 预告了一项新视频操控功能。用户可以单独修改视频中的任意角色或物体,同时让其余画面保持完全不变。目前该能力尚未公开发布,仅面向申请加入其创意合作伙伴计划的用户开放独家早期体验。
Krea AI 宣布接入 Pika 的多项视频新功能。创作者现在可以直接在视频中圈选修改特定区域、添加 AI 元素、执行帧插值以及混合图像,让视频生成的局部微调变得更加精细。
Pika 推出 Pika 2.2,支持 10 秒视频生成与 1080p 分辨率。新版加入了关键帧过渡功能 Pikaframes,允许创作者在 1 至 10 秒内精确控制画面转换。目前新功能已上线官网开放体验。
AI 视频平台 Pika 宣布正式在苹果 App Store 推出官方 iOS 应用。用户现在可以直接在手机端体验视频生成与特效功能,方便生成后直接在移动端发布和分享。
Pika 推出全新视频编辑功能「Pikaswaps」,让用户精准修改视频片段中的特定元素。只要用画笔圈选画面,配合文字提示或上传参考图,就能直接替换服装、表情、特定物品乃至整块背景。这让复杂的视频合成和换装操作大幅简化。
AI 视频生成平台 Pika 推出名为 Pikadditions 的新功能。用户可以在自己拍摄的视频或任何现有剪辑里,随意添加指定的人物或物体。目前新用户注册即可获赠 15 次免费生成额度。
Pika 正式推出 Pika 2.0 视频生成模型。新版本强化了文本对齐与画面表现,并新增「场景素材」(Scene Ingredients)功能,允许用户上传人物、地点或物品的参考图片,大幅提升视频生成的一致性与控制力。
Adobe 预告了 Premiere Pro 年内将推出的生成式 AI 功能,支持在画面中直接圈选增删物体、自动补帧延长过短的视频片段。最值得关注的是,Adobe 还演示了引入 OpenAI 的 Sora 和 Pika 等第三方模型生成画面的能力。不过这些 AI 工具预计今年晚些时候才会上线。
Pika 推出 Lip Sync 功能,接入 ElevenLabs 提供配音,让视频角色的嘴型能与台词同步。它支持文本转语音或上传音频,省去了繁琐的后期外挂工具。不过该功能目前仅限 Pika Pro 付费用户和受邀测试者使用。
AI 视频生成平台 Pika 宣布完成 5500 万美元融资,并开启 Pika 1.0 的早期测试。新版本不仅能生成 3D 动画与电影质感视频,还支持直接在画面里给人物换衣服、添加新角色或拓展画幅。目前已面向小范围用户开放测试申请。