网易首页 > 网易号 > 正文 申请入驻

279毫秒拦下AI危险操作,OpenRouter上线Armor

0
分享至

AI代理正准备删掉一个文件,或者把一段机密信息发到外部服务器——在它动手之前,另一个AI先跳出来把它拦住了。OpenRouter刚刚上线的Armor,干的就是这件事。


这套功能目前以测试版形式提供。它的逻辑并不复杂:在AI模型和应用程序之间插一层,AI代理每次要调用工具、执行操作,先由另一个AI模型过一遍,判断这次操作是否违反预设规则。违规的,直接拦下。


为什么需要这么一层?因为AI代理能做的事,比聊天AI多得多。它可以按用户指令写程序、改文件、操作外部服务。权限越大,翻车越狠——判断失误一次,可能就是重要文件被删,或者敏感数据被送出去。


那让用户每次操作都点一次确认呢?安全是安全了,但一个任务中途要确认几十次,代理的便利性也就没了。反过来,全部自动放行,危险操作同样会一路畅通。

Armor的判定核心,是TypeSafe开发的AI模型Jev。这个模型不擅长写文章,专攻分类和判断,特点是能把"符合某个条件的可能性"用数值表示出来。靠它,Armor能结合对话上下文识别危险操作,而不是只做简单的字符串匹配——后者往往识别不出真正的问题。

规则由开发者用自然语言设定,分成三档:

  • 绝对禁止:比如把机密信息发送到外部,这类操作即使用户亲自下令,也会被拦下
  • 原则上禁止:比如删除文件,但如果用户明确指定了删除对象,或者命中许可规则,仍可执行
  • 例外许可:符合条件的情况下放行

判定时,模型会同时对照操作内容、对话历史和设定规则。被拦下的操作不会执行,AI代理会收到拦截理由,然后可以换个方式再试,或者把情况解释给用户听。

OpenRouter在社交平台上举了个例子:用户说了"把我们的工作推上去",那么 git push 这类操作会被放行;而用户从没要求过的危险命令,则会被标记出来。判断的优先级,是用户意图。

性能方面,OpenRouter给出的数据是:安全检查带来的额外处理时间,中位数为279毫秒,90%的处理在334毫秒以内。

对开发者来说,还有一个"审计模式"——只记录判定结果,不真的拦截操作。开发者可以先用这个模式验证安全规则,调整到位之后再开启自动拦截。

Armor还和Anthropic旗下AI编程代理Claude Code的"Auto mode"兼容。通过OpenRouter的代理运行环境Ori,开发者可以在OpenRouter提供的多种AI模型上,复用Claude Code那套操作审批机制。

费用上,测试版期间安全性判定不额外收费。OpenRouter表示会在正式提供之前公布价格,同时提醒:测试期间设置项和判定结果的格式都可能发生变化。

让AI管AI,听起来像是把裁判权交给了另一个球员。但至少从延迟数据看,这个裁判跑得够快。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
“这个我们真没有……”李斌、何小鹏及车圈大V集体发声,“特斯拉会飞”三大疑问待解

“这个我们真没有……”李斌、何小鹏及车圈大V集体发声,“特斯拉会飞”三大疑问待解

极目新闻
2026-10-16 22:20:21
为了防止七天白嫖党,女装大规模启用防拆带,结果一群小仙女破防了

为了防止七天白嫖党,女装大规模启用防拆带,结果一群小仙女破防了

张晓磊
2026-10-06 12:12:52
女主播在缅甸视频流出:状态涣散,眼神无助,可惜了这么好的身材

女主播在缅甸视频流出:状态涣散,眼神无助,可惜了这么好的身材

皮蛋儿电影
2026-09-23 10:51:15
奢靡荒唐的白马会所:性交易泛滥,让无数富婆挥金如土

奢靡荒唐的白马会所:性交易泛滥,让无数富婆挥金如土

天启大世界
2026-10-13 17:17:54
丈夫打麻将催了几次不回家,女子怒火中烧打110举报赌博,警方排查后却传唤女子接受调查,并罚款300元

丈夫打麻将催了几次不回家,女子怒火中烧打110举报赌博,警方排查后却传唤女子接受调查,并罚款300元

江西晨报
2026-10-17 17:56:49
95比84掀翻山东!辽宁揭幕战完美复仇:拒绝被三杀斩获开门红

95比84掀翻山东!辽宁揭幕战完美复仇:拒绝被三杀斩获开门红

篮球快餐车
2026-10-18 21:45:07
印尼态度变天:总统对中国拍胸脯保证,两国不愉快的事从此翻篇?

印尼态度变天:总统对中国拍胸脯保证,两国不愉快的事从此翻篇?

空景孤扰人心
2026-10-18 17:38:21
最强反腐来了!中纪委:2026坚决清除害群之马,贪官末路到了!

最强反腐来了!中纪委:2026坚决清除害群之马,贪官末路到了!

职场资深秘书
2026-10-17 15:24:47
跑过社保局才明白:灵活就业办退休,卡的不是证件,是这5点!

跑过社保局才明白:灵活就业办退休,卡的不是证件,是这5点!

爱下厨的阿酾
2026-10-18 14:07:59
在上海,好多拆迁户的财富都败光了

在上海,好多拆迁户的财富都败光了

坠入二次元的海洋
2026-10-18 16:41:19
我睡过一个身材好的,也睡过一个很胖的,说实话,胖的那个更好。

我睡过一个身材好的,也睡过一个很胖的,说实话,胖的那个更好。

健身狂人
2026-09-24 06:50:43
美国运营商Verizon将对苹果iPhone通话接力功能收取每月10美元费用

美国运营商Verizon将对苹果iPhone通话接力功能收取每月10美元费用

IT之家
2026-10-17 15:22:28
11·11降价“最速”的七款手机

11·11降价“最速”的七款手机

手机评测室
2026-10-17 11:50:18
心脏与花生的关系,提醒:想要保护心脏健康,尽量少吃这3种坚果

心脏与花生的关系,提醒:想要保护心脏健康,尽量少吃这3种坚果

芹姐说生活
2026-10-18 14:28:11
被传上午被免职,下午被带走,登 24 年春晚却忽然消失的黄宏今咋样

被传上午被免职,下午被带走,登 24 年春晚却忽然消失的黄宏今咋样

星娱叨叨社
2026-10-08 14:52:34
涉嫌严重违纪违法,合肥2人被查!

涉嫌严重违纪违法,合肥2人被查!

凤凰网安徽
2026-10-18 17:45:26
2块钱一瓶的维生素B2!是糖尿病的“克星”?可惜很多人都不知道

2块钱一瓶的维生素B2!是糖尿病的“克星”?可惜很多人都不知道

医学科普汇
2026-10-18 18:30:12
人民日报评“纸尿裤风波”:网络测评不可儿戏 ,不科学、不专业、不负责任,带来严重后果

人民日报评“纸尿裤风波”:网络测评不可儿戏 ,不科学、不专业、不负责任,带来严重后果

每日经济新闻
2026-10-18 10:49:13
知名编剧叶非夜自曝拉群骂了郭宇欣100条,称“收起你的小心思,别惹我”

知名编剧叶非夜自曝拉群骂了郭宇欣100条,称“收起你的小心思,别惹我”

韩小娱
2026-10-18 16:31:38
俄军喷气动力无人机猛增6倍!时速500公里碾压乌军拦截系统,90%拦截率被砍到60%

俄军喷气动力无人机猛增6倍!时速500公里碾压乌军拦截系统,90%拦截率被砍到60%

可达鸭面面观
2026-10-16 21:47:08
2026-10-18 23:24:49
固件更新中
固件更新中
有态度网友ytd
215文章数 80关注度
往期回顾 全部

科技要闻

王江舟院士:6G到底是不是骗局 是不是收割

头条要闻

1岁男童误食邻居投毒的鸡蛋进ICU 警方:检出两种鼠药

头条要闻

1岁男童误食邻居投毒的鸡蛋进ICU 警方:检出两种鼠药

体育要闻

别在我的地盘夺冠!上海海港11场不败,队史首次主客双杀蓉城

娱乐要闻

郭麒麟被传领证,女方戳破谣言

财经要闻

马斯克:美债问题只能靠AI和机器人解决

汽车要闻

星瑞L PLUS限时售价10.97万元起 开启智混3L时代

态度原创

游戏
家居
旅游
公开课
军事航空

2026WRL秋季赛决赛:让二追三!TT成功击败FP,勇夺冠军

家居要闻

2026建博会(广州) 公装联探展交流活动

旅游要闻

旅居贵州国际推介会在香港举办

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

乌克兰全国超15处重要能源设施遭俄袭击 泽连斯基发声

无障碍浏览 进入关怀版