微软在 Azure 上线 CUA:用自然语言让 AI 自己点屏幕、填表单
微软在 Azure AI Foundry 推出 Responses API 与 Computer-Using Agent(CUA)。CUA 能看懂图形界面并跨桌面或网页执行点击与表单操作,Responses API 则将多工具调用整合为单次请求。不过针对高风险操作,目前仍强烈建议人工介入确认。
ChatGPT、Cursor、Perplexity 等 AI 工具上了什么新功能、出了哪些新产品,价格和开放地区有什么变化。
微软在 Azure AI Foundry 推出 Responses API 与 Computer-Using Agent(CUA)。CUA 能看懂图形界面并跨桌面或网页执行点击与表单操作,Responses API 则将多工具调用整合为单次请求。不过针对高风险操作,目前仍强烈建议人工介入确认。
法律 AI 平台 Harvey 推出智能体工作流。它能主动向用户索取上下文并展示「思考状态」,协助完成诉讼与交易任务。官方盲测显示,其在文书起草上达到专业律师水平,分析庭审笔录的表现甚至优于人工。该功能预计 3 月底正式向用户开放。
Perplexity 推出适用于 PC 的官方 Windows 桌面应用。该客户端支持语音听写、快捷键调用以及直接使用最新模型,让用户不用打开浏览器就能直接调用 AI 搜索。
Adobe 为素材库 Adobe Stock 推出基于 Firefly 的 AI 功能「Customize」。用户无需打开外部工具 Photoshop,就能在网页端直接扩图、套用风格或修改比例,并支持查看修改历史。该功能现已向付费订阅用户开放,使用需消耗生成式点数。
OpenAI 推出用于构建智能体的新工具套件,核心是全新 Responses API,内置网络搜索、文件搜索和电脑操作工具,并提供 Agents SDK。最值得关注的是,它大幅简化了多步骤任务的编排,且计划在 2026 年中彻底取代 Assistants API。
Google 为 Gmail 网页版推出 Gemini 驱动的「添加到日历」按钮。系统会自动识别邮件里的日程信息并弹出快捷入口,点击即可在侧边栏确认并创建事件。最值得关注的是日常排日程省了反复复制粘贴;不过目前仅支持英文,且仅限 Workspace 等付费订阅用户。
Google 开始在 Google Calendar 中测试 Gemini 侧边栏。加入 Workspace Labs 的用户可以直接用自然语言查询日程、查找特定人员会议或快速创建周期日程。最值得关注的是,日历管理告别了繁琐的手动点选,不过目前仅面向测试用户开放。
Highlight 创始人 Pim de Witte 宣布推出面向 MCP 服务器的通用界面。它支持基于屏幕上下文调用服务并通过 Tab 键生成内容,试图把类似 Cursor 的交互体验带到电脑上的所有应用中。
xAI 确认在 X 上线直接交互功能,用户在回复任意帖子时输入「grok」即可直接向 Grok 提问。这是 xAI 推出 Grok-2 与 Grok-2 mini 后的更新之一。也就是说,刷帖时无需切换应用,就能在评论流里直接让 AI 补充背景或解答疑惑。
OpenAI 宣布 ChatGPT macOS 桌面端支持直接在 IDE 中编辑代码。该功能现已向 Plus、Pro 和 Team 用户开放,免费及企业用户随后跟进。写代码不用再来回复制粘贴,不过有早期测试者反馈多文件联动时偶尔会被批量误改,还得备好撤销键。
Mistral AI 推出文档理解 API Mistral OCR,能精准提取 PDF 和图像中的公式、图表及交错图文。单节点每分钟可处理 2000 页,API 定价每千页 1 美元,并作为默认能力接入 Le Chat。
Krea AI 宣布接入 Pika 的多项视频新功能。创作者现在可以直接在视频中圈选修改特定区域、添加 AI 元素、执行帧插值以及混合图像,让视频生成的局部微调变得更加精细。
Convergence 推出集中式模版库 Template Hub,上线了数百个即开即用的智能体工作流。只要点一下,AI 代理 Proxy 就会自动接手干活,用户也能分享自己搭建的模版并追踪运行次数。这意味着复杂的日常流程可以直接抄作业,不用再从零搭建。
DuckDuckGo 宣布 Duck.ai 聊天结束测试,并升级搜索 AI 摘要功能。用户无需注册即可免费匿名调用 GPT-4o mini、Claude 3 Haiku 等大模型,聊天记录仅保存在本地设备;如果不想被 AI 打扰,还可以在设置中将出现频率降为 0 彻底关掉。
Anthropic 宣布改版 Anthropic Console。开发者现在可以直接在控制台内共享并协作编写提示词,告别以往靠文档复制粘贴的混乱。新版还接入了 Claude 3.7 Sonnet,支持手动控制思考 token 预算,并一键生成上线代码。
上周,初创公司 Butterfly Effect 推出通用智能体 Manus 开启内测,邀请码在闲鱼炒至数千元。官方宣称其在 GAIA 基准上超越 OpenAI,但实际调用 Claude 与千问等多模型协作。早期用户实测发现,它在订餐、订票及写游戏时频频崩溃、陷入死循环,目前仍处于压力测试阶段。
Perplexity 为其 macOS 客户端上线全新语音模式。用户按下快捷键 ⌘ + ⇧ + M 即可直接开口提问和搜索,无需手动打字。通过 Mac App Store 下载或更新应用即可体验。
D-ID 宣布与微软合作,将其实时 AI 数字人技术引入 Microsoft Azure。企业和开发者可在 Azure Marketplace 获取工具,为 Teams 等应用接入具备多语言实时口型同步甚至手语翻译能力的数字人,改善无障碍沟通与交互体验。
Google 宣布将 Gemini 2.0 引入美区 AI Overviews,提升编程与数学推理能力,青少年及未登录用户也可使用。同时,Google 在 Labs 推出实验性「AI Mode」,利用多步检索拆解复杂问题并支持多轮追问。目前优先向 Google One AI Premium 订阅用户开放测试。
据报道,Apple 在 iOS 18.4 beta 2 的 App Store 中加入了由 Apple Intelligence 支持的评价摘要功能。系统会自动汇总用户评价的核心观点并置顶展示,每周至少刷新一次。目前该功能已在美区面向英文应用开放测试,年内将支持更多语言。