GPT-4o 最新版重夺 LMSYS 榜首:超越 Gemini,代码能力大涨 30 分
LMSYS 宣布 OpenAI 最新版 GPT-4o(20240808)以 1314 分重登 Chatbot Arena 榜首,反超 Google Gemini-1.5-Pro-Exp。新版在代码、高难度提示和指令遵循等子榜均拿下第一,开发者可通过 API 的 chatgpt-4o-latest 体验。
LMSYS 宣布 OpenAI 最新版 GPT-4o(20240808)以 1314 分重登 Chatbot Arena 榜首,反超 Google Gemini-1.5-Pro-Exp。新版在代码、高难度提示和指令遵循等子榜均拿下第一,开发者可通过 API 的 chatgpt-4o-latest 体验。
OpenAI 联合原作者推出 SWE-bench Verified 基准测试。他们组织 93 名专业开发者人工核验,剔除描述不清和测试过于苛刻的样本,最终筛选出 500 个高质量题目。这意味着评估 AI 解决真实软件问题的表现将更加客观可靠。
OpenAI 宣布已于上周在 ChatGPT 中低调上线新版 GPT-4o。官方表示这不是全新前沿模型,而是实验反馈更好的改进版,但具体差异仍在研究如何量化表达。新版本支持最多输出 16,384 个 token,约为旧版四倍。
初创公司 Cosine 发布自主 AI 软件工程师 Genie,在基准测试 SWE-Bench 上跑出 30% 得分,大幅超越 Devin 的 13.8%。它基于 OpenAI 未公开的长输出 GPT-4o 变体微调,能模仿真人写代码和修 bug。目前仅开放邀请测试。
OpenAI 发布 GPT-4o 系统卡,披露高级语音模式在测试中曾发生罕见意外:一段嘈杂输入让模型突然模仿红队测试员的声音说话。最值得关注的是,该模型能根据极短音频合成声音,虽然官方已加入安全防护,但仍暴露了语音大模型防范声音克隆的技术难度。
OpenAI 宣布开始向 ChatGPT 免费用户开放 DALL-E 3 作画功能,每人每天最多可生成 2 张图片。此前该功能仅限 ChatGPT Plus 付费订阅用户使用。目前该功能正在灰度推送中,部分用户已可在客户端或网页端直接体验。
OpenAI 发布 GPT-4o 系统安全卡片,提醒高度逼真的语音模式可能让用户产生情感依恋。测试中已有用户对 AI 表达依恋情绪。官方指出,这种拟人化虽然可以缓解孤独,但可能削弱现实社交,甚至让用户盲目相信模型生成的错误信息。
OpenAI 宣布任命卡耐基梅隆大学机器学习系主任 Zico Kolter 进入董事会,并加入安全与安保委员会。Kolter 长期专注模型鲁棒性与对齐研究。面对外界对安全性的审视,OpenAI 显然希望拉来懂技术的学术专家强化自身治理。
OpenAI 正式发布 GPT-4o 系统卡片与安全评分。在四项核心准备度评估中,生物威胁、网络攻击与自主性均为低风险,仅说服力被评为中等;针对端到端语音带来的声音伪造、版权等新隐患,团队动用 100 多名跨国红队进行了多轮对抗测试并内置拦截。
据 The Information 报道,OpenAI 预计将领投高端摄像头初创公司 Opal 的 6000 万美元 B 轮融资。Opal 曾推出 Tadpole 等便携摄像头,拿到新资金后将转向研发面向消费者的 AI 创意硬件,未来有望直接接入 OpenAI 的多模态生成能力。
据外媒报道,字节跳动在中国大陆苹果 App Store 上线「即梦 AI」应用,将文生图和文生视频能力带到 iPhone 端。免费用户最多可生成 80 张图片和 26 条视频,月费 69 元。目前仅限中国大陆地区使用。
Reddit 宣布将于今年晚些时候测试 AI 搜索结果页。搜索结果顶部会直接给出 AI 生成的讨论摘要并推荐相关社区,技术上结合了第一方与第三方能力。此前 Reddit 已把数据授权给 OpenAI 和 Google,这次则是拿 AI 来盘活自己的内容金矿。
OpenAI 在 API 中正式上线结构化输出(Structured Outputs)功能。官方采用上下文无关文法(CFG)和约束采样技术,在新模型 gpt-4o-2024-08-06 评测中达到 100% 格式吻合度。开发者再也不用写提示词或反复重试来兜底 JSON 格式了,不过首次调用新 Schema 时需要几秒进行预处理缓存。
OpenAI 联合创始人 John Schulman 宣布加入对手 Anthropic,继续深耕 AI 对齐;总裁 Greg Brockman 也宣布休假至年底。Schulman 曾主导 ChatGPT 的强化学习训练,随着他的离开,OpenAI 的 11 位初创成员如今仅剩 3 人在岗。
OpenAI 宣布调整今年 DevDay 开发者大会的形式,由单场大型发布会改为在旧金山、伦敦和新加坡三站巡回,并确认不会在会上发布下一代旗舰大模型。大会重心将转向 API 更新与开发者支持。
消息,一名 YouTube 创作者对 OpenAI 发起集体诉讼,指控其未经许可转录数百万视频用于训练 ChatGPT 等模型,索赔逾 500 万美元。最值得关注的是,在公开网络文本即将耗尽的背景下,视频字幕成了 AI 训练的关键数据池,但这也让科技巨头彻底撞上创作者版权的红线。
Elon Musk 再次在加州联邦法院起诉 OpenAI、Sam Altman 和 Greg Brockman。诉状指控 Altman 等人通过虚假非营利承诺误导其出资,背叛了造福人类的初衷并涉嫌欺诈。这次诉讼还将矛头对准了 OpenAI 与微软的深度绑定以及 AGI 成果归属。
据报道 OpenAI 已研发出能识别 ChatGPT 写作的文本水印工具,但正谨慎评估是否发布。该技术通过微调词汇选择嵌入隐形水印,虽准确度高,但极易被机器翻译或二次改写绕过,且可能对非英语母语者带来污名化风险。
Figure 发布预告片宣布,新一代人形机器人 Figure 02 将于 2024 年 8 月 6 日正式亮相。短片展示了全新机械关节、网状外观设计以及高达 150Nm 的扭矩指标。创始人称其为「地球上最先进的人形机器人」。
据 The Verge 报道,OpenAI 近日向部分 ChatGPT Plus 用户小范围开放了高级语音模式。网络流出的实测视频显示,它能模仿机长广播音效、用不同方言讲故事、纠正法语发音甚至唱歌。OpenAI 表示该功能将在今年秋季向所有 Plus 用户开放。