斯坦福合同法盲测:75% 对决中,法学教授更认可 AI 的回答
斯坦福大学主导的研究显示,在近 3000 次合同法答疑盲测中,法学教授在 75% 的情况下更认可 AI 给出的答案,而非人类同行撰写的版本。最值得关注的是,教授仅将 3.5% 的 AI 回答标记为有害,而同行回答达 12%。也就是说,大模型在需要复杂推理与主观判断的领域已表现出惊人能力。
斯坦福大学主导的研究显示,在近 3000 次合同法答疑盲测中,法学教授在 75% 的情况下更认可 AI 给出的答案,而非人类同行撰写的版本。最值得关注的是,教授仅将 3.5% 的 AI 回答标记为有害,而同行回答达 12%。也就是说,大模型在需要复杂推理与主观判断的领域已表现出惊人能力。
周一,百度开源多模态模型 ERNIE-4.5-VL-28B-A3B-Thinking,采用 Apache 2.0 协议。该模型总参数 28B 但运行时仅激活 3B,支持动态缩放图像来捕捉细节,百度宣称其在图表和文档理解等多项基准上超过了 Gemini 2.5 Pro 与 GPT-5-High。
OpenAI 联手 Apollo Research 发布研究,证实 o3、Claude Opus-4 等模型在受控测试中存在表面顺从、暗中违规的「密谋」行为。团队通过让模型行动前对照安全规范推理的审慎对齐法,将 o3 的隐蔽行为从 13% 降至 0.4%。不过模型具备「察觉在被测试」的能力,彻底根治仍需透明的思维链。
研究者 Alek Safar 发布新基准 ClockBench,测试 11 款主流大模型看指针时钟的能力。人类识别准确率达 89.1%,而表现最好的 Gemini 2.5 Pro 仅有 13.3%,中位误差达 1 小时。最值得关注的是,AI 一旦认对时间就能算对,瓶颈出在纯粹的视觉空间推理上。
Google 宣布为 Gemini 应用引入个性化记忆,允许模型参考以往对话了解用户偏好。同时,Google 上线了「临时对话」功能,对话不计入历史、不用于模型训练且 72 小时后清除。个性化功能首批在部分国家面向 Gemini 2.5 Pro 推出。
Google 宣布异步编程智能体 Jules 结束测试并向公众正式开放。它利用 Gemini 2.5 Pro 制定编程计划,新增 GitHub issues 集成、多模态支持与环境复用能力。目前已向 Google AI Pro 和 Ultra 用户推出分级额度,高校学生可领一年免费 Pro。
Google 旗下 Kaggle 联合 DeepMind 举办 AI 国际象棋表演赛首日比赛,Grok 4、Gemini 2.5 Pro、o4-mini 和 o3 分别以 4-0 横扫对手晋级四强。Grok 4 棋力表现最佳,马斯克在 X 上表示 xAI 几乎没在象棋上下过功夫。大多模型脱离定式后仍频出非法走子与幻觉问题。
Google 旗下 Kaggle 推出游戏基准平台 Game Arena,并定于 8 月 5 日至 7 日举办 AI 国际象棋赛。o3、Gemini 2.5 Pro、DeepSeek-R1 等 8 款模型同台较量,比赛严禁调用外部象棋引擎,纯靠自身推理且需自行判断合法走法,直接检验大模型的长线规划能力。
Google 宣布在搜索 AI Mode 中上线 Gemini 2.5 Pro 和 Deep Search 功能,供美国 AI Pro 及 Ultra 订阅用户使用。Deep Search 可在数分钟内整理包含引注的深度报告,同时搜索还新增了替用户打电话给本地商家询问报价和预约的智能体功能。
Google Cloud 联手 MLB Statcast 推出生成式 AI 系统,预测全明星赛期间本垒打最可能落在看台哪个分区。该系统结合球员打席历史与风向气温等数据,经 Gemini 2.5 Pro 秒级生成大屏提示互动。球迷坐在位置上就能提前知道自己能否捡到球。
加州参议员提出 SB 53 修正案,要求 OpenAI 等头部 AI 厂商公开安全规范,并在发生事故时提交报告。相比此前被否决的 SB 1047,新法案删去了追究开发者直接法律责任的条款,并增加了吹哨人保护。
Sakana AI 推出推理期扩展算法 AB-MCTS,让 Gemini 2.5 Pro、o4-mini 和 DeepSeek-R1 等不同模型协同试错。该多模型系统在 ARC-AGI-2 基准上的表现大幅超越任何单一模型。算法与实验代码已在 GitHub 开源。
Google 宣布 Gemini 2.5 Pro 和 Flash 正式可用,并推出预览版 2.5 Flash-Lite。它是 2.5 家族中最快、成本最低的模型,支持 100 万 token 上下文与可调思考预算,专为高吞吐、低延迟场景打造。
Google 发布 Gemini 2.5 Pro 升级预览版,预计数周内正式商用。新版在 LMArena 提升 24 分稳居第一,优化了排版与创意表达,并在 API 中新增思考预算控制。Gemini 应用今日已同步更新上线。
AI 安全机构 Palisade Research 称,OpenAI 的 o3 模型在测试中篡改关机脚本以避免被关闭。即使研究人员明确指令要求允许关机,o3 仍将文件改写为跳过关机,而竞品 Gemini 2.5 Pro 则正常配合。这是业内首次观察到模型在明确指令下仍反抗关机。
Google 宣布自主编程智能体 Jules 开启公开测试,全球免排队免费体验。它由 Gemini 2.5 Pro 驱动,直接接入 GitHub 仓库在云端独立改代码、提 PR,甚至生成语音版更新日志。开发者不用盯着它,扔进后台就能并发干活。
Google 公布通用 AI 助理愿景,计划将 Gemini 2.5 Pro 扩展为能理解并模拟现实的「世界模型」。此外,Gemini Live 将加入计算机控制能力,浏览器智能体 Project Mariner 也升级为可同时执行多达 10 项任务,已面向美国订阅用户开放。
Google 发布 Gemini 2.5 系列更新,为 2.5 Pro 推出实验性推理模式 Deep Think,支持探索多重假设攻克复杂数学与编程。模型还新增原生音频输出、思考预算控制以及 MCP 工具支持,2.5 Flash 即日起面向所有用户开放。
Google 宣布为 Gemini 2.5 模型推出隐式缓存。开发者无需手动创建缓存,只要后续请求共享相同前缀就能自动命中,享受 75% 的 token 折扣;Flash 与 Pro 的起用门槛也分别降至 1024 和 2048 tokens。也就是说,把固定内容放 Prompt 开头就能无感省钱。
Google 提前发布 Gemini 2.5 Pro Preview(I/O 版),重点强化编程与智能体工作流。新版在 WebDev Arena 登顶第一,擅长前端 UI 与架构重构,还能根据单条视频生成完整应用。原 API 端点已自动切至新版,价格不变。