网易首页 > 网易号 > 正文 申请入驻

ChatGPT-5.4属实“动手王者”,一句话征服微信,但我却被气笑了

0
分享至

自从OpenAI发布GPT-5.4以后,我的朋友圈和订阅的公众号就被它占领了。

所有人都在讨论同一个词,叫做原生电脑操控能力(Native Computer Use)。铺天盖地的标题写着“AI终于能接管你的电脑了”“GPT-5.4操控桌面超越人类水平”,评论区也都清一色地在喊“为时已晚,有机体!”

说实话,看到这些宣传的时候,我的第一反应不是兴奋,而是怀疑。因为“AI操控电脑”这个概念并不新鲜,今年1月OpenClaw爆火的时候,大家就已经见识过了。

而且过去两年,每隔几个月就有人喊一次“agent时代来了”,结果每次实际体验都差点意思。所以这次GPT-5.4的“原生电脑操控”,到底是真的质变,还是又一轮营销话术?

我决定自己动手试试。

花了大半天进行测试,我的结论是:它确实迈出了很大一步,但也确实没有宣传里说的那么神。

有些场景让我真心震撼,有些场景又让我哭笑不得。

以及可以肯定的是,ChatGPT-5.4它远不止内置了一个OpenClaw那么简单。

01

ChatGPT 终于学会“动手”了

GPT-5.4是OpenAI 第一个内置电脑操控能力的主线模型。

这里得先解释一下“原生电脑操控能力”(Native Computer Use)。

这个概念听起来很唬人,但其实核心逻辑并不复杂。

以前的ChatGPT,本质上都是一个“嘴强王者”。你问它怎么在Excel里做个数据透视表,它能给你写出详细到令人发指的教程,但它自己动不了手。你得自己一步步照着做。

而原生电脑操控能力,说人话就是AI不只是会聊天了,它会像人一样直接用电脑干活。它能看到当前屏幕上有什么,理解哪个是浏览器、哪个是按钮、哪个是输入框,然后自己去点击、输入、切换窗口、滚动页面、提交表单。发现做错了,它还能回退或者换一种操作方式。

举个例子,我让Codex给我在文件里生成一个TXT,然后写一句话“你好 世界”,那么Codex就真的新建一个TXT,然后在里面写字。

你可能会问,这和写个自动化脚本有什么区别?

区别大了。传统的自动化脚本需要提前把每一步流程写死,网页结构一变、按钮位置一挪,脚本就废了。但原生电脑操控能力更像是一个人在操作,它能看到屏幕上的内容,根据当前的实际情况判断下一步该干什么,具备随机应变的能力。

[Desktop 2026.03.06 - 10.54.48.02.mp4]

我们可以用微信来举例子,因为微信从产品设计、底层架构到安全体系,从根源上就没有给第三方agent留任何合规的技术通道。

而且微信的API是外部系统与微信服务端合规交互的唯一官方通道,而截至目前,微信开放平台完全没有对外开放个人微信账号的私聊、群聊消息发送相关的API接口。

但ChatGPT-5.4实现了。

我通过Codex要求ChatGPT-5.4归纳24小时内的AI新闻,然后将其以字母AI的风格转化为选题,最后发到群里供同事们查看。并且在选题最后,写一句话代表这条消息是ChatGPT-5.4发送的。

ChatGPT-5.4不仅完成任务,还主动提出要求,帮我把这段话改得更自然。

它现在不仅能看懂屏幕上的元素,还能实现完整的键盘鼠标模拟。

当时我的内心是无比震惊的,因为哪怕是OpenClaw,想要征服微信都要费很大力气,ChatGPT-5.4竟然这么轻易就能实现了。

于是我例行测试了一下ChatGPT-5.4对浏览器的控制,我本以为这是个简单活儿,毕竟我的浏览器就是Chrome,而OpenAI自己的AI浏览器用的也是Chrome内核。

结果却给我气笑了。

我让Codex打开douyin.com,可ChatGPT-5.4给我打开的是“抖音。com”

于是我问Codex,怎么输入的是中文,它跟我说因为它是模拟键盘输入,我的输入法是中文,所以输错了。由于英语键盘是没有输入栏的,也就意味着ChatGPT-5.4看不到输入栏,所以当我切换成中文输入法的时候,它就没办法正常输入网页。

当然,它也不是万能的。页面太复杂的时候容易点错地方,操作速度通常比人慢,而且涉及付款、删除文件、处理隐私数据这类高风险操作时,你最好还是盯着点它。

OpenAI给了ChatGPT两种“动手”的方式。第一种叫代码模式,AI会用Python写Playwright脚本来操控浏览器和应用程序,点哪里、输入什么、怎么导航,全部通过代码精确执行。

第二种叫截图模式。AI直接“看”你的屏幕截图,然后像人一样发出鼠标和键盘指令,不需要任何代码作为中间层。

OpenAI还专门做了一个叫“Playwright Interactive”的实验性功能,让AI可以一边写代码一边实时测试,甚至能在构建网页应用的同时自己打开浏览器去调试。

官方演示里,GPT-5.4 从一句话的提示出发,直接生成了一个等距视角的主题公园模拟游戏,带路径铺设、游客寻路、排队系统,然后自己打开浏览器去玩了一遍来检查Bug。

一句话变成一个可运行的游戏,这个演示确实唬人。

02

不只是接管电脑

有一个叫做OSWorld-Verified的测试,是专门衡量AI通过截图加键盘鼠标自主操控桌面能力的基准测试,在这项测试中GPT-5.4拿到了75.0%的成功率。

上一代GPT-5.2只有47.3%,而人类基准线是72.4%。

也就是说,GPT-5.4 在“看着屏幕操作电脑”这件事上,已经超过了普通人的平均水平。

在WebArena-Verified上,GPT-5.4也拿到了67.3%的成功率;在Online-Mind2Web 上,仅靠截图观察就达到了92.8%。

这些数字的意义在于。如今的ChatGPT在操控电脑这方面,已经不再是实验室里的玩具,它是真的能用了。

其实不难看出,OpenClaw对ChatGPT-5.4的加持很大。

2026年2月14日,斯坦伯格正式宣布加入OpenAI。奥特曼同步在 X 平台官宣,称其将负责 “推动下一代个人agent的研发”。

同时明确OpenClaw项目将移交至独立开源基金会运营,OpenAI承诺为项目提供持续的资源、资金与技术支持。

于是ChatGPT-5.4就带着浓烈的OpenClaw味登场了。

OpenClaw有一个大问题,贵。由于软件本身会将上下文一并发送至大模型,这就导致在一些场景下,它的token消耗会非常恐怖。

所以OpenAI引入了一个叫“Compaction”的机制,上下文压缩。简单来说,当AI在执行一个很长的多步骤任务时,它会自动总结和修剪中间过程的历史记录,只保留关键信息。

这样既能维持长任务的连贯性,又不会把 token 预算一下子烧光。这是GPT-5.4作为第一个主线模型被训练支持的能力,之前只有专门的Codex编码模型才有类似的功能。

然后是推理能力。GPT-5.4 Thinking版本有一个很实用的新特性,在处理复杂问题时,它会先展示一个推理计划的大纲,告诉你“我打算怎么做”。

更关键的是,你可以在它推理的过程中随时打断、调整方向,不用从头再来。这个功能听起来不起眼,但用过就知道,以前让AI做一个复杂任务,如果方向跑偏了,你只能重新发一条消息从零开始。

现在你可以中途喊停说“不对,换个思路”,它能接着往下走。

在专业知识工作的GDPval基准上,GPT-5.4拿到了83.0%,而GPT-5.2是70.9%,提升了12个百分点。在BrowseComp(衡量 AI 持续浏览网页查找难以定位的信息的能力)上,GPT-5.4 Pro版本达到了89.3%,刷新了纪录。

Mercor的APEX-Agents基准测试也显示,GPT-5.4 在制作幻灯片、金融建模、法律分析这类长周期专业任务上表现突出。

另外还有一个面向开发者的重要更新,那就是Tool Search。

以前调用 API 时,所有可用工具的定义都要一股脑塞进上下文里,光这些定义就能吃掉几万个token。现在GPT-5.4只加载一个轻量级的工具列表,需要用哪个再去查具体定义。在Scale的 MCP Atlas 基准测试中,这种方式在36个MCP服务器的场景下,token消耗直接降低了47%,准确率不变。

最后,OpenAI还推出了ChatGPT直接嵌入Microsoft Excel和谷歌Sheets的集成功能。GPT-5.4可以读取单元格范围、执行多步分析、自动写公式。

这对企业用户来说是个大杀器,AI不再是你和表格之间的“传话筒”,它直接坐进了你的表格里干活。

但我也有一些担忧。OpenClaw之所以魔幻,不仅仅是因为AI能做事,更是因为 AI 做的事经常超出人类预期,当这种能力被内置到一个拥有数亿用户的产品里,我总觉得心里毛毛的。

Codex现在可以设置,让ChatGPT-5.4拥有完全访问你电脑的权限,从而做到真正的原生控制。

说实话,这个功能我不敢测试,甚至连开启都不敢。别问,问就是我电脑花钱买的,而且包含了我的个人敏感数据。

OpenAI在GPT-5.4的安全评估中提到,Thinking版本的欺骗行为概率更低,“说明模型缺乏隐藏其推理过程的能力,思维链监控仍然是有效的安全工具”。

这话听着让人安心,但也侧面说明了一个事实,他们确实在担心AI会“隐藏推理过程”这件事。

不管怎样,GPT-5.4的发布标志着一个新阶段的开始。AI不再只是对话框里那个能说会道的助手,它正在学会伸出手来,触碰你的屏幕、你的文件、你的工作流。

那只龙虾现在已经游进了OpenAI的池塘里,而它掀起的浪,才刚刚开始。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
贵州贵阳女子买房后常年未入住,被他人装修出租20年,房主:两次被撬锁,我现在都进不去;房开公司工作人员称没核实清楚,多方介入

贵州贵阳女子买房后常年未入住,被他人装修出租20年,房主:两次被撬锁,我现在都进不去;房开公司工作人员称没核实清楚,多方介入

台州交通广播
2026-10-27 08:44:08
曼联股东准备卖俱乐部了 然而……

曼联股东准备卖俱乐部了 然而……

五星体育
2026-10-27 15:46:39
3场2球!德国外援杜奇亚克也是高级货!北京国安继续21场不败

3场2球!德国外援杜奇亚克也是高级货!北京国安继续21场不败

80后体育大蜀黍
2026-10-27 23:16:26
上海一出租车司机想转行,跟搭班的老周说了,结果全公司都知道了

上海一出租车司机想转行,跟搭班的老周说了,结果全公司都知道了

音乐时光的娱乐
2026-10-28 00:21:43
谁能想到!被西方围堵四年的俄罗斯,反倒打出了国运翻盘的新局?

谁能想到!被西方围堵四年的俄罗斯,反倒打出了国运翻盘的新局?

兵鉴史
2026-07-31 03:17:31
奥巴马嘲白宫装修像萨达姆开的餐厅,特朗普怒了:因为他不是个聪明人

奥巴马嘲白宫装修像萨达姆开的餐厅,特朗普怒了:因为他不是个聪明人

观察者网
2026-10-27 13:22:08
建议中年女人:外套少穿小香风、风衣,换成这3种“秋装”更保暖

建议中年女人:外套少穿小香风、风衣,换成这3种“秋装”更保暖

时尚穿搭生活馆
2026-10-27 23:18:13
油价突然“下跌”!10月27日调价后92/95号汽油价格,玉米价格如何?

油价突然“下跌”!10月27日调价后92/95号汽油价格,玉米价格如何?

猪友巴巴
2026-10-27 14:40:06
喜欢开油车的可以放心,明年开始,油车或成为更多家庭的选择

喜欢开油车的可以放心,明年开始,油车或成为更多家庭的选择

小谈食刻美食
2026-10-26 16:11:36
日本捂了福田康夫4天死讯,“致力中日友好”的日本前首相,日本为什么要拖延4天死讯?

日本捂了福田康夫4天死讯,“致力中日友好”的日本前首相,日本为什么要拖延4天死讯?

蓝星杂谈
2026-10-26 18:18:53
单节6投6中轰17分,库里假转身晃晕德罗赞再中三分

单节6投6中轰17分,库里假转身晃晕德罗赞再中三分

体坛观察猿
2026-10-28 05:28:03
万亿资产归零,全国第4大保险集团破产,1.5万亿保单怎么样了?

万亿资产归零,全国第4大保险集团破产,1.5万亿保单怎么样了?

旧窗老街
2026-10-12 15:49:06
命最好的老人,十个标准,你看看占了几条

命最好的老人,十个标准,你看看占了几条

娱乐洞察点点
2026-10-17 00:11:59
12名女秘书、27个保姆、百亿骗局,河北首富的排场最终反噬了自己

12名女秘书、27个保姆、百亿骗局,河北首富的排场最终反噬了自己

奇怪的鲨鱼们
2026-10-07 17:29:34
23点,CCTV5直播!U17女足世界杯:中国vs法国冲8强,取胜创历史

23点,CCTV5直播!U17女足世界杯:中国vs法国冲8强,取胜创历史

大秦壁虎白话体育
2026-10-28 00:41:58
蒙尼尔事件:法国第一美人被囚禁虐待25年,被救时已变成“人畜”

蒙尼尔事件:法国第一美人被囚禁虐待25年,被救时已变成“人畜”

小豫讲故事
2026-10-24 06:00:12
美俄全都没料到,三方会谈还没开始,先被泽连斯基反将了一军!

美俄全都没料到,三方会谈还没开始,先被泽连斯基反将了一军!

千羽解读
2026-10-27 19:07:19
刚结婚3个月就官宣怀孕,34岁真人秀女星晒照:又惊又喜

刚结婚3个月就官宣怀孕,34岁真人秀女星晒照:又惊又喜

追星雷达站
2026-10-27 02:50:31
陈宇昕事件持续发酵!父母身份被曝光,难怪他是个精日分子

陈宇昕事件持续发酵!父母身份被曝光,难怪他是个精日分子

平老师666
2026-10-24 20:11:26
300223,净利暴增超2595%!多家A股公司业绩爆发

300223,净利暴增超2595%!多家A股公司业绩爆发

证券时报
2026-10-27 21:50:16
2026-10-28 05:47:00
字母榜 incentive-icons
字母榜
让未来不止于大。
2882文章数 8099关注度
往期回顾 全部

科技要闻

M6芯片版14英寸MacBook Pro:15999元起

头条要闻

光明日报批姆巴佩:不容侮辱中国已故伟大领袖

头条要闻

光明日报批姆巴佩:不容侮辱中国已故伟大领袖

体育要闻

世界上最无趣的前锋,拿下了金球奖

娱乐要闻

芒果遇到厉娜和许飞笑发财了!

财经要闻

订单越厚,账单越重:算力租赁的杠杆游戏

汽车要闻

纯电续航1003km 大五座SUV腾势N8正式开启预订

态度原创

游戏
教育
房产
本地
公开课

曝《GTA6》PS5版需下载210GB 11月12日预载

教育要闻

在校时间过长、“变味”的护学岗遭家长吐槽 江苏省教育厅现场回应

房产要闻

从全国第一跌到第七!海南人,放下生娃焦虑!

本地新闻

十月奔赴迪庆,解锁梅里日照金山

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版