网易首页 > 网易号 > 正文 申请入驻

点一遍鼠标就能生成工作流,Grok Bot把提示词扔了

0
分享至

“终于不用逼着人类写三千字提示词,去向一个模型解释那个该死的按钮在屏幕什么位置了。”

这句话,基本概括了 Grok Bot 那段演示视频里最扎人的地方。视频里没有炫技的对话,也没有堆参数,只有一个工程师接管电脑,在 Google Slides 里手动做了一遍动画排版。


做完之后,Grok Bot 把这一串动作封装成了一个可调用的专属技能。下次再碰到类似需求,Bot 顺着这个工作流自己跑。

它到底在记录什么

剥掉那些“AI 成了精”“偷师学艺”的神化词,这套演示真正做的事并不玄乎。Grok Bot 在后台记录的是两样东西:视觉变化与点击轨迹。

你手动点一遍,它把鼠标的位移和界面的状态变化一起收进去,然后逆向编译成能跑的工作流。过去想让自动化工具帮你干活,最痛苦的不是执行,而是交代任务——你要截图、标红框、写长篇大论的提示词去描述界面。

示教学习相当于给系统装上了三件套:

  • 眼睛是多模态录屏器,扫过界面的每一个元素状态;
  • 脑子是语义提取器,把一次性动作抽象成带参数的标准工序;
  • 手是带容错的自动脚本,下次遇到同类任务照方抓药。

你用最本能的肌肉记忆点一遍,就把深埋在脑子里的隐性流程全交接了。人类知识输入的接口,在这里彻底变了。

反方:两个绕不过去的坑

但如果以为从此所有岗位都能一键复制,有两个现实必须讲清。

第一,录制下来的只是顺风局的操作轨迹。一旦目标网页稍微改版,或者跳出一个意料之外的验证弹窗,缺乏异常处理分支的 Bot 会瞬间卡在原地。

第二,它学会的是怎么点,而不是为什么要点。当业务数据发生冲突时,它依然无法做价值取舍。

这两条不是吹毛求疵,而是示教学习这条路本身的边界。录下来的是动作,不是判断;是路径,不是目的。目标环境一变,路径就断了;数据一冲突,动作就悬空了。

我的判断

大模型最大的浪费,就是让懂业务的人天天在提示词里扮演人工编译器。懂流程的人把时间花在“怎么把流程描述给模型听”上,这件事本身就不合理。

能把一次手动画面的操作变成长期复用的技能,确实把普通人做自动化的门槛打平了一大截。以前要跨过写代码、排期、写手册这几道坎,现在你只要会点鼠标。

但门槛打平不等于岗位消失。能被轻易复刻的从来只是鼠标指针的位移,那个在关键时刻知道什么时候该打破流程的人,依然是你。

所以这套东西的价值,不在于 AI 有多聪明,而在于它把“交代任务”这件事的成本压到了接近零。至于判断和取舍,还是得留在人这边。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
池昌旭林珍娜裸体出镜!网飞新剧大尺度床戏播出

池昌旭林珍娜裸体出镜!网飞新剧大尺度床戏播出

东方不败然多多
2026-09-19 10:55:39
过期一天就是毒。很多家庭天天都在用,还舍不得扔!

过期一天就是毒。很多家庭天天都在用,还舍不得扔!

三农老历
2026-09-20 01:47:07
乌克兰组建“C8”集团!亲俄领导人也说俄罗斯是侵略者,菲科涉嫌叛国

乌克兰组建“C8”集团!亲俄领导人也说俄罗斯是侵略者,菲科涉嫌叛国

鹰眼Defence
2026-09-19 16:45:33
北京正大量上市!价格大缩水便宜近一半!市民争相挑选:肥!鲜!甜!

北京正大量上市!价格大缩水便宜近一半!市民争相挑选:肥!鲜!甜!

BRTV新闻
2026-09-19 19:29:08
俄军430平方公里包围圈,两天就崩了,损失非常惨重

俄军430平方公里包围圈,两天就崩了,损失非常惨重

瞩望云霄
2026-09-19 20:20:01
这跟没穿有何不同?35岁女星直播穿搭引发争议,大胆露背几乎走光

这跟没穿有何不同?35岁女星直播穿搭引发争议,大胆露背几乎走光

寒士之言本尊
2026-09-16 16:03:37
全面绞杀开始?日本突然宣布,中方亮明底线:不认错,就没得谈

全面绞杀开始?日本突然宣布,中方亮明底线:不认错,就没得谈

疯狂小菠萝
2026-09-19 12:47:14
太扎心!失业9个月,好不容易找到工作,纽约男子上班仅2.5小时就因一个原因被辞退

太扎心!失业9个月,好不容易找到工作,纽约男子上班仅2.5小时就因一个原因被辞退

华人生活网
2026-09-19 05:28:08
65分狂胜!中国女篮替球迷争口气,小日子真慌了,男篮太羞愧

65分狂胜!中国女篮替球迷争口气,小日子真慌了,男篮太羞愧

宗介说体育
2026-09-19 17:46:04
亚运会乒乓球今天开打!9月20日赛程:国乒4场团体对决,或将迎战朱雨玲

亚运会乒乓球今天开打!9月20日赛程:国乒4场团体对决,或将迎战朱雨玲

全言作品
2026-09-20 01:48:04
莎拉弹劾案变天了?3比1,四位大法官同台论法,16票门槛已经被撬动?

莎拉弹劾案变天了?3比1,四位大法官同台论法,16票门槛已经被撬动?

天气观察站
2026-09-19 13:23:11
中国知名美女作家称在国内压抑不自由,赴美一年沦为为外卖员。

中国知名美女作家称在国内压抑不自由,赴美一年沦为为外卖员。

荆楚寰宇文枢
2026-09-18 21:22:19
光刻机巨头早已意识到,中国造不成光刻机,但要造一个光刻工厂

光刻机巨头早已意识到,中国造不成光刻机,但要造一个光刻工厂

蜉蝣说
2026-09-19 18:48:23
我问老公,张馨予那么有钱,为什么买一辆15万的车?老公说,不是他们买不起,而是何捷不想让人说闲话。

我问老公,张馨予那么有钱,为什么买一辆15万的车?老公说,不是他们买不起,而是何捷不想让人说闲话。

可读
2026-09-17 22:43:34
为什么近两年3D电影彻底消失了?

为什么近两年3D电影彻底消失了?

潮式呼吸
2026-09-19 22:05:35
弗里克神了:率队7轮全胜,甩开皇马6分,超级神锋帽子戏法:射手榜甩开姆巴佩

弗里克神了:率队7轮全胜,甩开皇马6分,超级神锋帽子戏法:射手榜甩开姆巴佩

足球狗说
2026-09-20 05:32:45
名古屋亚运会|9月20日一共产生31枚金牌,中国队赛程:王楚钦、孙颖莎出战,潘展乐冲击金牌!中国男篮铜牌之战

名古屋亚运会|9月20日一共产生31枚金牌,中国队赛程:王楚钦、孙颖莎出战,潘展乐冲击金牌!中国男篮铜牌之战

开成运动会
2026-09-19 21:56:26
美政坛大地震!弹劾投票来了,美防长被指伊朗战争罪犯,强逼下台

美政坛大地震!弹劾投票来了,美防长被指伊朗战争罪犯,强逼下台

最美的巧合
2026-09-19 14:50:41
进口垄断彻底终结?挪威三文鱼空运到中国的时代,正在加速落幕

进口垄断彻底终结?挪威三文鱼空运到中国的时代,正在加速落幕

抽象派大师
2026-09-17 14:33:45
执法检查组,赴浙江实地检查4天

执法检查组,赴浙江实地检查4天

政知新媒体
2026-09-19 20:00:33
2026-09-20 06:52:49
字节漫游指南
字节漫游指南
有态度网友ytd
194文章数 117关注度
往期回顾 全部

科技要闻

要走650亿,智谱的理想越来越贵

头条要闻

男子拿10多个西瓜连砸摊主头部 最新进展:赔偿了近7万

头条要闻

男子拿10多个西瓜连砸摊主头部 最新进展:赔偿了近7万

体育要闻

2026亚运会开幕式 胡明轩吴愉担任旗手

娱乐要闻

甜度爆表!许嵩冯禧晒婚纱照官宣结婚

财经要闻

江西首富破产:一张927万商票压垮千亿帝国

汽车要闻

大块头的从容 红旗G919如何兼顾豪华与越野能力

态度原创

游戏
教育
健康
数码
房产

《FF7:启示》加入更多纵向探索内容 探索整个星球

教育要闻

大学生家长都说有难度!

脑动脉瘤的治疗方法,该选哪一种?

数码要闻

三星又罢工了!这次堵到李在镕家门口:内存芯片又要涨价了

房产要闻

海口房价,降不动了!

无障碍浏览 进入关怀版