当地时间 11 月 19 日,谷歌给 macOS 版 Gemini 应用塞进了一个重磅功能:computer use(电脑操控)。
以前你要在电脑上点几十下鼠标、切换三四个软件才能干完的杂活,现在一句话丢给 Gemini,它自己打开软件、敲字、填表、点菜单,全程躲在后台干完,连你的鼠标光标都不抢。
先别急着激动,这个新功能到底能干什么、又有哪些硬伤,一张对照表直接看清:
操作方式:能跨本地文件、桌面应用和网页执行多步骤点击、输入、填表;但官方未公布具体由哪个 Gemini 模型驱动。
运行体验:在隔离的后台窗口干活,主屏幕和鼠标不受影响,聊天框可实时预览;但官方未给出任务成功率、完成耗时等实测数据。
典型场景:照片批量调色、Blender 搭 3D 场景、PDF 提信息填表、做演示文稿、二手平台上架商品;但暂未向非美国地区及非英语用户开放。
安全控制:用户自选授权应用,随时暂停或停止,关键操作前需人工批准;但无法脱离用户个人 Google 账号与付费订阅独立使用。
它在后台疯狂点鼠标,你的屏幕却纹丝不动
过去我们用 AI,本质上还是「你问一句、它答一句」,最后复制粘贴、点鼠标干活的还得是自己。
这次谷歌在 macOS 版 Gemini 里加入的 computer use,直接把「动嘴」变成了「动手」。
触发方式很简单,在提示词里加上 @Computer use,再用大白话把任务交代清楚就行。新版应用的设置路径(Customize 进入 Connectors)里,已经能看到 Blender、Autodesk Fusion 等桌面应用的身影。
最戳中打工人痛点的,是它的运行机制。
Gemini 不会霸占你的桌面,而是开一个隔离的后台窗口默默干活。你的聊天界面里会同步显示实时操作预览,方便你随时「监工」,但你的主屏幕和鼠标光标完全不受干扰,该回微信回微信,该看文档看文档。
以前是人盯着 AI 吐字,现在是 AI 躲在后台替你点鼠标。
从谷歌官方放出的演示场景来看,它盯上的全是普通人和职场人最头疼的重复劳动:批量给一堆照片调色、在 Blender 里搭建复杂的 3D 场景、从本地 PDF 里抠出信息去填在线表单、抓实时数据做演示文稿、整理商品信息在二手平台上架销售。(来源:Google 官方博客,经 Macworld、9to5Google、IT之家转述)
![]()
MacBook 上的 Gemini 应用
把电脑交给 AI 干活,不怕它乱删文件乱下单吗
听到「AI 直接操控电脑」,很多人的第一反应不是爽,而是慌。
万一它理解错了意思,把重要文件删了,或者在二手平台上把价格少打了一个零,这锅谁来背?
针对普通人最担心的安全底线,Gemini 应用产品经理 Michael Friedman 给出了三道保险:
第一,权限在你手里。你可以自己挑选允许 Gemini 访问哪些桌面应用,没授权的软件它碰都碰不到。
第二,随时可以喊停。只要在实时预览里发现苗头不对,你可以立刻暂停或彻底终止任务。
第三,关键操作必须你点头。凡是涉及重要变动的关键步骤,Gemini 在执行前都会停下来,必须经过你的明确批准才会继续。
这套设计思路很务实,至少在规则层面上,把「AI 替你干活」和「AI 替你做主」切开了一道防火墙。
想尝鲜别白忙活,四道门槛缺一不可
如果你手头正好有一台 Mac,准备立刻下载更新体验一把,先别急着折腾。
谷歌给这项功能划定了极其严格的开通条件,下面这 4 步核对流程,只要有一项不达标,就暂时用不上:
核对设备芯片:必须是搭载 Apple Silicon 芯片的 Mac,老款 Intel 芯片机型直接无缘。
核对系统版本:系统必须升级到 macOS Sequoia 15.0 或更新版本。
核对账号与订阅:必须年满 18 岁、使用个人 Google 账号,并且开通 Google AI Plus、Pro 或 Ultra 订阅(其中 Plus 订阅起价为每月 4.99 美元)。
核对地区与语言:首批仅面向美国地区的英语用户逐步开放。
换句话说,国内用户目前暂用不上,官方也没有公布后续扩大开放范围的时间表。
硬件、系统、订阅、地区四件套缺一不可,绝大多数人现在只能先看个热闹。
![]()
macOS 版 Gemini 应用的 Ask Gemini 入口
谷歌这步棋,到底把谁逼到了墙角
把视线拉远一点看,让 AI 接管电脑屏幕并不是谷歌的首创。
在此之前,Anthropic 的 Claude 以及 OpenAI 都已经推出过类似的电脑操控能力。谷歌选在 11 月 19 日把这项功能直接做到 macOS 桌面端,外界普遍认为,这是在给苹果的 Siri 施加压力。(来源:The Hindu BusinessLine)
不过,普通人看新品最忌讳只看官方宣传片。
截至目前,谷歌既没有公布 computer use 底层到底由哪个 Gemini 模型驱动,也没有放出任何关于任务成功率、平均完成时间的实测数据。
演示视频里有多丝滑,真实桌面上就有多少未知数。
从聊天机器人进化到「后台打工人」,AI 终于开始替普通人分担那些枯燥又耗时的机械点击,但在门槛降下来、实测口碑跑出来之前,让子弹再飞一会儿才是最稳妥的选择。
(信息来源:Google 官方博客、TechCrunch、9to5Google、IT之家、Macworld)
特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.