Stability AI 发布 SDXL 0.9:参数翻倍,消费级显卡也能跑
Stability AI 推出文生图模型 SDXL 0.9,画面细节相比 4 月的测试版大幅升级。新版本采用两阶段生成架构,组合参数达 6.6B,能在 8GB 显存的消费级显卡上跑出 1024x1024 图像。普通用户现可通过 Clipdrop 试用,正式开源版 1.0 预计 7 月中旬到来。
Stability AI 推出文生图模型 SDXL 0.9,画面细节相比 4 月的测试版大幅升级。新版本采用两阶段生成架构,组合参数达 6.6B,能在 8GB 显存的消费级显卡上跑出 1024x1024 图像。普通用户现可通过 Clipdrop 试用,正式开源版 1.0 预计 7 月中旬到来。
Hidden Door 推出基于生成式 AI 的《绿野仙踪》角色扮演平台限量测试,完整版预计 2023 年冬季上线。AI 叙述者会根据玩家的选择实时生成定制剧情、角色和插画,让经典童话变成可互动的叙事沙盒。游戏目前通过其 Discord 频道提供测试。
Meta 公布语音生成模型 Voicebox。它基于上下文学习,只需 2 秒音频样本就能模仿音色合成语音,支持 6 种语言的风格迁移,还能像橡皮擦一样切除杂音并重生成无缝语音。
Google 宣布推出服装虚拟试穿功能。该功能放弃了传统的图像变形贴图,转而利用扩散模型与交叉注意力机制从头生成像素,真实呈现衣服在不同体型模特身上的垂坠和拉伸效果。目前已率先支持 H&M、Everlane 等品牌的女式上衣。
Paul McCartney 透露已借助 AI 完成披头士「最后一首歌」。团队用分离技术从老卡带里剥离出 John Lennon 的纯净人声再做混音,解决了当年因杂音无法处理的难题。这首搁置数十年的作品预计将在年内正式推出。
Meta 推出音乐生成模型 MusicGen,支持通过文本描述或旋律提示来创作音乐。该模型基于 2 万小时的音乐和乐器样本训练,理论上只要哼个调子就能生成变体曲目。这意味着零门槛音乐创作正在成真,但也可能面临音乐产业的版权挑战。
Adobe 推出新版 Adobe Express,直接接入 Firefly 生成式 AI,支持用日常语言生成图像和艺术字特效。新版还换上了全新的多合一编辑器,把拖拽式视频剪辑、PDF 处理以及与 Photoshop、Illustrator 的实时云端协作打通。
Runway 宣布视频生成模型 Gen-2 正式向所有人开放,不再需要排队等候名单,也不用在 Discord 里生成。平台还提供 90 秒的免费视频生成时长,额度用完后才需付费。也就是说,任何人现在都能直接在网页端体验 AI 视频生成了。
3D 内容平台 Tafi 宣布正在开发文生 3D 角色引擎。该模型基于其 Genesis 数据集训练,生成的角色可原生导出至 Unreal、Unity、Blender 及 NVIDIA Omniverse 等平台。平台还为自愿加入训练的创作者设计了归属与收益分成机制。
Google 推出风格迁移方法 StyleDrop。它基于 Muse 文生图模型,仅需单张参考图就能捕捉配色、光影和纹理,微调极少数参数即可在三分钟内完成学习,风格控制效果优于 LoRA 和 DreamBooth。
一张疑似 AI 生成的五角大楼爆炸假图在 Twitter 疯传,包括俄罗斯 RT 等大号转发。美股在 4 分钟内跳水 0.26%,随后反弹。当地消防部门迅速辟谣澄清并无事故,网友也指出了围栏扭曲等典型 AI 生成破绽。
Stability AI 发布面向开发者的 Stable Animation SDK,让用户能调用 Stable Diffusion 模型生成动画。该工具支持纯文本、图片加文本、视频加文本三种生成方式,开发者可通过动画端点直接把生成能力集成进自己的产品和工作流中。
Google 在 I/O 大会上宣布 Android 将在秋季推出生成式 AI 壁纸。用户只需挑选预设提示词即可生成专属壁纸,系统主题色还会自动适配;此外 Pixel 手机下月还将率先获得 3D 电影壁纸和 Emoji 壁纸。
本周,Grimes 推出 AI 语音软件 Elf.Tech,允许创作者上传录音并转换成她的音色。生成的歌声可以直接用于制作新曲,前提是将曲目 50% 的录音版税分给她。最值得关注的是,她选择将个人声线主动「开源」变现,把版权纠纷转变成合作分成。