跳到正文
IFAI

AI工具

Anthropic 开放电脑操作预览:手机派活,Claude 替你操控桌面

首次发布 传播指数 49

Anthropic 面向 Claude Pro 和 Max 用户开放电脑操作功能研究预览。在 Claude Cowork 和 Claude Code 中,Claude 可直接点击屏幕、打开文件并操作应用。搭配上周推出的 Dispatch,用户还能在手机上派发任务,让电脑自动执行。

图:claude.com

你坐在早高峰的地铁上,在手机上随手给 Claude 发了一条消息,让它把你昨天写了一半的代码跑一下测试,顺便提交个 PR。等你到了工位打开电脑,发现活已经干完了,屏幕上的终端窗口刚刚关掉。

这不是科幻场景,而是 Anthropic 最近想让你习惯的日常。Anthropic 正式将此前备受关注的电脑控制能力带到了 Claude Cowork 和 Claude Code 中,目前以研究预览的形式向 Claude Pro 和 Claude Max 订阅用户开放。

没接口也没关系,它会自己动鼠标

这项功能的核心逻辑很直接:不需要任何复杂配置,Claude 就能像真人一样操控你的电脑。它可以移动光标、点击按钮、滚动页面、打开本地文件,或者启动浏览器和开发者工具。

在执行任务时,Claude 并不是盲目地抓取屏幕。系统会先查找有没有现成的服务连接器,比如 Slack 或 Google Calendar。只要有官方接口,它就会优先调用接口来保证速度和准确率。

只有在完全没有连接器的情况下,Claude 才会退回到直接控制屏幕的模式。Anthropic 也承认,直接对着屏幕点点点肯定比直接调用 API 要慢得多,遇到复杂的任务可能还需要多试几次。

由于直接接管系统权限非常敏感,安全成了最大的坎。Anthropic 在底层加入了模型激活扫描机制,用来检测可能出现的提示词注入攻击。此外,Claude 在打开新应用前必须获得明确许可,部分敏感应用默认禁止访问,用户也可以随时一键接管。

手机派活,电脑干活

如果单看屏幕控制,其实并不算全新概念,早在两年前 Anthropic 就在模型层面展示过类似能力。但这次最大的变化在于它和新功能 Dispatch 的结合。

上周 Anthropic 刚刚上线了 Dispatch,让手机端和桌面端的 Claude 保持同一段连续对话。现在有了电脑控制加持,你可以在通勤路上用手机给它派活,让它在后台处理邮件简报、提取周报数据,甚至监控 3D 打印的进度。

需要注意的是,目前桌面客户端必须保持唤醒和运行状态。平台支持方面,虽然官方提到支持桌面系统,但据 The Verge 报道,当前的研究预览阶段实际上先限制在 macOS 设备上体验。

为什么重要

我们认为,Anthropic 这次最聪明的地方,在于彻底放下了对统一 API 生态的执念,给智能体找了一条务实的落地路径。

以往的自动化工具总要求软件厂商提供标准化接口,现实中大批内部老系统、小众开发工具根本没有现成 API。让 AI 像人一样看屏幕、点鼠标,虽然动作慢了一点,但它把接入成本直接降到了零。普通打工人不用写复杂的自动化脚本,只要电脑开着,就能把碎活甩给它。

配合手机端的 Dispatch,这也悄悄改变了人机协作的形态。过去你用 AI 编程或写周报,必须肉身守在电脑屏幕前看着它打字;现在它更像是一个留在办公室的值班助理,你负责在手机上发号施令,它在后台替你踩坑执行。

但隐患同样摆在眼前。看屏幕操作的容错率依然很低,UI 稍微卡顿或弹出一个无关窗口,任务就可能卡死。更别提把整台电脑的键鼠权限交给 AI,即便有模型激活扫描,防范恶意提示词注入依然是一场猫鼠游戏。对于手头有核心资产的团队,我们建议现在可以拿来跑跑边缘流程,但核心生产环境最好还是多留个心眼。

来源 (2)

  1. [1]
    claude.com(在新标签页打开)原文claude.com
  2. [2]
    theverge.com(在新标签页打开)报道theverge.com

每日 AI 内容精选