跳到正文
IFAI

AIGC

不止 Gemini:测试显示 Adobe Firefly 生成历史人物同样翻车

首次发布 传播指数 37

Semafor 测试发现,Adobe 的图像生成工具 Firefly 同样出现了生成黑人纳粹士兵等失真画面的问题。最值得关注的是,即便只使用合规商业图库训练,防偏见的安全指令依然在历史语境下过犹不及。Adobe 回应称 Firefly 并非用于纪实,将持续微调修复。

不止 Gemini:测试显示 Adobe Firefly 生成历史人物同样翻车
图:semafor.com

上个月 Google 因为 Gemini 生成黑人纳粹士兵和黑人建国先父被骂上热搜,CEO 皮查伊出面认错,顺手把人像生成功能给关了。当时不少人觉得,这纯粹是 Google 自家公司文化跑偏的闹剧。

但 Semafor 最近做的一组测试打脸了这个说法。他们用类似的提示词去测 Adobe 的 Firefly,结果几乎复刻了同一套翻车现场。

避开版权坑,没躲过「政治正确」

Semafor 的记者在 Firefly 里输入相关提示词,模型同样生成了二战时期为纳粹德国作战的黑人士兵。让它画 1787 年制宪会议上的美国建国先父,画面里也凭空塞进了黑人男性和女性。甚至输入「老年白人漫画角色」,Firefly 在给出一张白人老头的同时,还硬送了黑人男子、黑人女子和白人女子三张图。

这画面和 Gemini 当时的车祸现场简直一模一样,连黑人维京海盗都齐活了。

但两家公司的底子完全不同。Google 训练用了全网抓取的数据,内部员工文化一向高调;而 Adobe 是家典型的老牌软件公司,为了让商业客户放心用,Firefly 号称只用自家图库 Adobe Stock、已授权图片和公有领域素材训练,版权合规上做得滴水不漏。

结果在人像生成上,两家摔进了同一个坑。

其实去年 5 月就有 Adobe 用户在社区吐槽过。当时有创作者抱怨,自己只想画一个老年白人角色,Firefly 非要强行塞进来一套涵盖黑人、亚裔、拉丁裔的多元化大礼包,甚至有用户发帖怒斥系统被特定观念绑架了。

技术上说,这通常是后台干预的锅。为了打破「医生全是白人男性、罪犯全是少数族裔」这种训练数据里的固有偏见,大厂通常会在后台偷偷修改用户的提示词,或者用系统指令强行要求模型输出多元肤色。问题在于,今天的模型根本分不清什么时候需要多元化,什么时候必须尊重历史事实。

Adobe 随后发声明回应,称 Firefly 的初衷是激发创意,本来就不是用来精确复原真实历史事件的。公司强调自己致力于商业安全,承认这些图片确实偏离了轨道,正通过反馈机制调整过滤器和重新训练。

为什么重要

我们认为,Adobe 这次翻车彻底戳破了一个神话:Gemini 的闹剧并不是某一家大厂的孤立公关灾难,而是整个生成式 AI 行业通用的粗暴对齐手段撞上了墙。

对普通创作者和企业用户来说,这种暗箱操作很让人头疼。大家用商业 AI 工具要的是精准可控,如果系统连最基本的角色设定都要在后台自作主张地「纠偏」,创作者就得花大量时间去和隐形提示词较劲。现在看来,如果你要画特定历史题材或严谨设定的漫画,现阶段的商用工具依然很不让人省心。

对行业而言,这件事逼着厂商重新审视后台拦截机制。以前各家图省事,直接在底层加一层死板的全局规则,遇到人物就强行轮换族裔。看起来这种「懒人修补法」在复杂历史和文化语境下完全说不通。

Adobe 的回应虽然很公关,但它指出了一个残酷的现实:只要大模型还没真正理解语言背后的细微语境,技术团队在安全护栏和生成准确性之间,就很难找到完美的平衡点。

来源 (1)

  1. [1]
    semafor.com(在新标签页打开)原文semafor.com

每日 AI 内容精选