Martin Scorsese 出任 Black Forest Labs 顾问:用 FLUX 做分镜
Black Forest Labs 宣布知名导演 Martin Scorsese 担任其顾问,协助指导以人类审美和工艺为核心的视觉 AI 研发。双方还进行了使用图像生成模型 FLUX 制作故事板分镜的实际创作合作。
Black Forest Labs 宣布知名导演 Martin Scorsese 担任其顾问,协助指导以人类审美和工艺为核心的视觉 AI 研发。双方还进行了使用图像生成模型 FLUX 制作故事板分镜的实际创作合作。
研究人员提出免训练方法 SEGA,专门解决 DiT 模型生成超分辨率图像时易崩溃的问题。它在每步去噪时按频域能量动态缩放 RoPE 位置编码,既保留宏观构图又还原微观细节。这意味着无需昂贵的重新训练,现有模型也能直接输出 4096 级别的高清大图。
字节团队提出空间奖励建模框架,专门解决图像模型搞不清前后左右的问题。团队构建了包含 8 万多组正误对比的数据集训练奖励模型,能有效指导 Flux 等模型摆对复杂物体的空间布局。相关数据集与模型权重计划公开。
据彭博社报道,Meta 与德国初创公司 Black Forest Labs 达成一项两年 1.4 亿美元的合作。Meta 首年将支付 3500 万美元,次年支付 1.05 亿美元,以获取 Flux 模型的图像生成技术。继联手 Midjourney 后,Meta 再次斥巨资补齐视觉生成短板。
大模型评测平台 lmarena.ai 推出 Image Arena 图像竞技场。用户输入一段提示词,系统会调用 FLUX、Stable Diffusion、DALL-E 等两个匿名模型同时生成图片,由用户盲选投票决出胜负,官方排行榜也即将上线。
KREA AI 宣布上线 Flux 图像提示词功能。用户现在可以在调用 Flux 模型生图时引入参考图片作为生成条件,以此引导画面的构图与风格。该功能目前直接面向所有用户免费开放。
Black Forest Labs 发布新一代生图模型 Flux1.1 Pro 并推出测试版 API。新模型生成速度比前代快 6 倍,支持最高 2k 分辨率,画质与提示词遵循度均有提升。开发者目前可通过官方 API 及 Replicate 等合作平台接入调用。
上周,有爱好者在测试图像生成模型 Flux 时发现,通过训练 LoRA 可以在生成的画面中精准复现自定义字体。相比此前模型动辄把英文画成乱码,Flux 擅长渲染场景文字,让用户能在黑板招牌或名片上塞进指定字体。不过生成时偶尔仍会出现字母拼写偏差。