想象一下:当你教新同事做一个复杂操作时,会怎么说?
打开 A 网站 → 点 B 按钮 → 填 C 字段 → 提交。
但如果你要教 AI Agent 呢?
传统做法是写一个 Skill,把任务目标、执行步骤......所有细节写清楚。
而微软开源的新项目:Skill Recorder 则给出了另一种思路:
你亲自做一次,AI 看一遍,自己学会。
![]()
01 项目介绍
Skill Recorder 是微软开源的一个桌面工具。
核心能力:
录下一次你做任务的全过程,AI 自动提炼成可复用的技能(Skill)。
之后 AI Agent 看到类似任务就能自动执行。
![]()
02 项目亮点
1.屏幕录制:
按 ⌘⇧R(macOS)或 Ctrl+Shift+R(Windows)开始录屏,支持:
窗口跟踪:记录活跃应用、窗口切换。
浏览器 URL:macOS 下抓取当前页面地址。
屏幕视频:Chromium 录制,只保留画面有变化时的帧。
剪贴板预览:短文本复制内容用于关联步骤。
语音旁白(可选):用本地 Whisper 模型(99 种语言)实时转写。
2.AI 分析:
点击 Analyze,GitHub Copilot 会:
读取事件时间线,并查看截图。
读取你的语音转写文本。
最后提炼出一个整体意图 + 一组有序步骤列表。
用户可以随时修改这些步骤,直到读起来合适。
PS:首次分析会提示登录 GitHub Copilot(如果还没登录的话) 。
4.生成 Skill / Automation:
审查并编辑分析结果,满意后一键生成:
Skill:SKILL.md 格式,Agent 按需执行。
Automation:带触发器(定时 / 事件),Agent 自动运行。
6.优先原生工具:
优先使用 gh CLI、web_fetch 等 Agent 原生工具。
7.隐私设计:
录制、存储、帧提取、语音转写全在本地。
只有点击 Analyze(事件时间线 + 截图 + 语音转写文本)才上云。
PS:录制时不要输入密码、不要复制 Token 等机密信息,口述也不要 。
03 快速入门
1.macOS / Ubuntu:
2.Windows (PowerShell):
04 适用场景
1.重复性表单提交:
录一次,后续 AI Agent 看到类似表单自动执行。
2.定期报表生成:
录操作,然后生成 Automation,定时自动跑。
3.新人培训:
录老员工操作,提炼生成 Skill,让新人 Agent 照着做。
05 局限
1.需要 GitHub Copilot 订阅 。
2.Analyze 时数据上云,对高度敏感场景需谨慎 。
3.复杂决策操作可能不准,仍需人工审核 。
06 结语
如果你在用 AI Agent 做重复性任务,不妨试试。
我们下期再见!
特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。
Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.