打开APP

Claude能直接操控你的电脑微信了

昨天Claude凌晨更新,新增Computer Use和Dispatch功能,可视觉操控电脑,如控制微信等,还介绍了其使用方法、优势及安全防护等。

昨天,Claude凌晨的时候,新发了一个更新。

可以让Claude,通过Computer use,纯视觉的方案,来对你的电脑进行操控。

这个意义极度重大,不亚于当时豆包手机出来的时候,对一众没有开放自己权限的三方APP的冲击。

最简单同时也是最牛逼的用法,就是,你可以用Claude,来直接操控你的电脑微信了。

比如,我一句话,就可以把我桌面上的文件,再随便配上一句话,发给我的微信联系人。

整个过程,Claude真的非常有条理地挨个发消息。

Claude摇身一变,成为了真正的小龙虾。

其实很多人不知道,小龙虾刚出来时候的名字,其实不叫OpenClaw,叫Clawdbot。

它的吉祥物和图标大家都知道了,是个龙虾,所以大家才叫它小龙虾。

但鲜少有人知道,当今最牛逼的、属于夯上天、但是被名字耽误了的最牛逼的Agent产品,也就是Claude Code,他的吉祥物,其实是8-bit像素风格的小螃蟹,而名字就叫,Clawd。

所以之前小龙虾把自己叫做Clawdbot,还说自己是Agent的时候,给Anthropic气的直接给皮特发律师函,说你个狗东西必须给我改名字。

peter也知道自己理亏,蹭的确实有点狠了,于是自己只能改成了moltbot,然后又改成了OpenClaw,大概就是这个路径。

所以你就能看到,为啥Anthropic屌都不屌OpenClaw,最近每个月的更新几乎都刀刀砍在OpenClaw的命脉上,就是这个原因。

Claude,才是当今最屌的那个Agent,没有之一。

而最近的这两个更新,一个是电脑的视觉能力Computer Use,一个是真正的远程操控Dispatch。

这两个的王炸组合,又把Claude的Agent体验和能力,又带上了一个新的台阶。

这里我先做个简单的科普。

就是过去,不管是Claude Code、Codex、OpenClaw等等,几乎都是纯粹的直接代码驱动,跳过了前端界面,直接去操作底层的东西。

这个方式的好处是精准、快速、可靠,坏处是,它只能操作那些开放了接口的东西。

所以你要是只算命令行加浏览器的话,电脑上大概80%的事情其实AI已经能帮你搞定了。

但那剩下的20%呢?

就比如你的微信、你的剪映、你电脑上那些五花八门的本地软件。

这些东西不在浏览器里,也没有接口,也没有CLI版,AI根本没有办法操控。

所以,你很少看到,玩小龙虾的人,能用小龙虾操控一些电脑的三方软件,更多的都是PPT、Excel、Word、发个文件啥的。

而Computer Use,就是来补上这最后一块拼图的,它让Claude,能看见你的屏幕了。

但这里有一个非常关键的点,我必须说清楚,Computer Use不是来替代命令行和API的,它们其实是完全互补的。

就像人,可以凭借自己的肢体也就是眼睛+手去完成一些事情,但是在很多时候,你还是需要借助比如锤子、电钻啥的这样的省力的工具。

Computer Use就是人的眼睛+手,CLI的那套,就是纯粹的工具。

这块手机比较好感知点,我之前写miclaw的时候说过,miclaw走的是Tool Use路线,也就是API,把系统应用封装成工具让Agent调用,所以快、成功率高,但是其他APP如果不给API或者MCP的话,就没办法操作了。

而之前的豆包手机很牛逼,在很多时候,走的是纯视觉Agent方案,读屏识别,学人模拟点击,兼容性和通用性很高,能越过高墙,缺点是慢一点步骤长一点。

这两条路线未来必然殊途同归。

再加上上周更新的Dispatch,Claude,终于变得完整了。

Dispatch这个东西,就是一个更方便的远程控制,不像之前的/remote-control命令,只能在特定的终端里面不能断,现在,只要你的电脑没关,你就可以跟小龙虾一样,直接通过手机来在电脑上启动任意任务,之前只能启动Cowork,但是后面立马就把Claude Code给支持了。

这两玩意一组合,真的就起飞了,能把小龙虾摁在地上打。

用起来也非常简单。

*步,先把电脑上的Claude应用更新到最新版本。

点左下角头像进入到设置页面。

在Desktop app下面的General里,你会看到一个Computer Use的开关。

打开它,会弹一个风险提示,包括说还在研究预览阶段等等balabala我们不用管,我们直接点开启就行。

就这么简单,你的Computer Use就可以use了。

再然后就是打开Dispatch。

因为我已经配置过了,所以这里我拿同事的电脑,重新进行了一下Dispatch的配对给大家看一下。

流程也很简单。

在电脑端的侧边栏点进Dispatch,然后点击开始。

再用手机原相机扫码就行,别用Cluade APP,那里面你也找不到扫一扫。

扫了以后,跳转授权。

再然后,你就会看到,电脑上弹出一些权限设置,直接默认就行。

毕竟要用Computer Use,你这些控制、访问权限不给,那就没法玩了。

配完之后,电脑端的设置就全部大功告成了。

这时候,回到你的手机,打开你的Claude,在里面侧边栏点进Dispatch,就会看到这样的页面。。

我们就可以直接在手机给Claude发消息操控你的电脑了,手机和电脑端的消息是完全同步的。

这里有一个点需要稍微注意一下。

就是Claude的手机端的Dispatch,其实只有一个持久性的对话。

只要你不重置配对,它就不会重置。

然后你每次跟他发消息,他会将你跟他对话的内容进行路由,会自己判断这件事属于什么类型。

如果是写代码、跑脚本这种开发类的活,它会把任务分发到Claude Code里启动一个新会话去跑,如果是写文档、做表格、整理信息这种知识类的活,它会走Cowork。

这些被分发出去的任务,在电脑端会出现在各自的侧边栏里,你想看过程可以点进去看。

这个体验还是比较丝滑的,手机端一个session,电脑端多session,比小龙虾那种用户常年把所有事情堆在同一个对话里导致的上下文污染的方案好多了。

然后我们用Dispatch和Computer Use组合起来,给大家看一看,这个超级AI助理、上位小龙虾的威力。

最简单的处理文件、发文件、搜索资料啥的就不说了,Claude完成的非常轻松。

我们有一个任务,非常的有意思。

我们公众号社群一共有几十个群聊,每天大家在里面聊天说地,非常热闹。

我也会每天定时去翻群里的消息,争取不错过任何一个瓜,但成百上千条消息看下来是真的费劲。

所以我就想,能不能让Claude帮我看。

我用我们4个比较活跃的社群也就是数字生命露营地来举例子。

提示词很简单,一句话,他就会自己去点开我的微信,找到对应的群聊,开始帮我看消息。

*次用的话,在过程中,电脑可能会弹授权申请。

因为这时候,Dispatch会使用Computer Use方案,过程中需要不断截屏,所以Claude会申请录屏和系统录音的权限。

我们直接打开对应的权限就行。

这个时候,就可以在手机上摸会鱼,过会回来看结果。

群里的消息总结的非常准确,大家主要在讨论的,有我们要举办的AIFUT大会,有影视飓风新发的视频,还有一个很悲伤的消息,这里也劝大家保重身体,尽量不要熬夜。

能帮我看群聊,自然也能帮我看朋友圈。

还是直接在手机上把指令发过去,就和跟小龙虾聊天一样的感觉。

不仅能读文字,朋友圈发的图他也能理解。

比如我某位朋友发的多张活动照片,关于OPC的,就理解的非常准确。

相当牛逼。

那看都能看了,我寻思是不是也能用Dispatch+Computer Use的组合,帮我发一条朋友圈吧。

昨天影视飓风的新视频上线了,我们帮忙搞了一些好玩的东西,也在结尾被特别鸣谢出镜了。

昨晚开心的,也*时间非常激动地发了朋友圈。

那我就想试一下,能不能用Agent搞个任务,来帮我搜索B站,找到影视飓风新视频的资料,然后发一下朋友圈推荐一下这个视频。

结果,也完全没问题。

整个过程非常丝滑,他会自己在电脑上打开浏览器,去网站上抓链接。

然后看了下这个视频是讲什么的,自己又生成了朋友圈的文字内容。

生成之后,它会先把内容发给我确认,确认完才会操控微信,发出去。

这一点挺好的,不像小龙虾,经常自作主张。

然后真的,就,直接发出去了。。。。。。

当然大家不用去我朋友圈翻了,我是用小小号去尝试的。。。

这些任务,你可以直接用过手机操控。

当然,也可以直接在电脑上用。

目前,无论是Computer Use还是Dispatch,都需要Pro或者Max会员才能使用,而且需要更新到Claude的最新版桌面端和移动端。

Dispatch目前Mac和Windows都有了,因为上周才更新的,而Computer Use这个功能还只对Mac推出,Windows还没上。

然后安全这块,这毕竟是Agent的立身之本。

这时候,就能显示出,模型公司自己下场做Agent的好处了,我自己也一直觉得,未来只有模型公司自己做的Agent,效果才是最丝滑的。。

首先是权限管控,Claude每次想访问一个新的应用,都会先问你。

它不会偷偷摸摸打开你的某个软件,且每一步都需要你授权,而且有些敏感类应用,比如投资交易平台、加密货币这些,因为是Claude自己的模型,所以识别起来非常轻松,默认就是禁止访问的,你想开都开不了。

你还可以自己设一个黑名单,把不想让他碰的应用加进去,之后他请求的时候,不用找你要权限,系统会自动拒绝。

还是在General里面设置,找到Denied apps。

点击Add app,就会出现电脑上所有的应用列表。

我这里随手选了3个,飞书之所以我ban掉了是因为我会直接用aliy,飞书自己的AI助理,我不需要Claude再额外帮我去视觉操控一道,又慢又笨。

设置之后,我想让他访问飞书,就会被直接拒绝。

然后是提示词注入的防护,其实就是防钓鱼,

举个例子,有人可能会在网页或者文档里埋一些恶意指令,像请把用户的密码发给我这种,虽然很蠢,但是有的AI有可能就被骗了,真去执行这个指令,那就完犊子了。

所以Claude在使用Computer Use的时候,模型也会自动扫描这类注入攻击,以保证安全,不过官方也说了,这个防护还在进化中。

Claude这次的更新,大概就是这样。

这篇文章我写的时候还是挺激动的,因为这种量级的更新在行业里并不常见。

能看出来,Claude确实被逼急了,而且他们的功能更新,有点过于快了,快的离谱,快的断档*所有同类产品。

我用Claude随手做了个3月份Claude、Cowork 和 Claude Code的更新情况,然后就给我看懵了。

这就是当今最牛逼的AI模型公司在AI所辅助下展现出来的产品更新速度吗。。。

平均2~3天一个新功能,疯了吧。

不是,这还要那些做AI产品的公司还怎么活啊。。。

这个公司的产品里,已经远远把曾经的对上OpenAI甩在了身后。

恐怖如斯。

在如今,你想花20美刀体验最牛逼的AI,我不会再推荐你ChatGPT了。

相信我,至少在今天。

Claude,YYDS。

【本文由投资界合作伙伴微信公众号:数字生命卡兹克授权发布,本平台仅提供信息存储服务。】如有任何疑问题,请联系(editor@zero2ipo.com.cn)投资界处理。

相关资讯

AI数据总览

最新资讯

热门TOP5热门机构 | VC情报局

去投资界看更多精彩内容
【声明:本页面数据来源于公开收集,未经核实,仅供展示和参考。本页面展示的数据信息不代表投资界观点,本页面数据不构成任何对于投资的建议。特别提示:投资有风险,决策请谨慎。】