网易首页 > 网易号 > 正文 申请入驻

员工偷偷用的AI,为什么成了企业最大的安全盲区?

0
分享至

你批准的那个模型,可能并不是最大的AI安全盲区。真正的盲区,是那些没人知道正在运行的AI工具、集成或智能体。


员工用AI写代码、总结文档、分析客户数据、自动化日常工作,很多时候只是因为AI让活儿变简单了。但当一个员工把机密合同上传到未经批准的聊天机器人,当一个开发者把个人AI编程助手接到专有源代码上,当有人部署了一个能访问内部系统的AI智能体却跳过了安全审查——会发生什么?

这就是"影子AI":在组织批准的安全与治理控制之外运行的AI工具、服务、集成和智能体。风险不只是"存在一个未授权工具",而是公司数据和系统访问权限,可能流经安全团队看不见、评估不了、也控制不了的基础设施。

影子AI早就不是聊天机器人那点事了

第一波影子AI,多是员工用个人账号登录公共AI服务。今天的暴露面复杂得多,至少有三种形态:

  • 看不见的数据管道:员工把专有源代码粘贴进外部AI助手,组织可能没有任何集中记录,不知道共享了什么,也不知道适用哪家供应商的数据处理条款。
  • 未经审查的集成:团队装了个AI扩展,或把外部服务接到业务应用上。取决于它的权限,这个集成可能访问文档、消息或其他敏感信息。
  • 没人认识的AI智能体:开发者部署了一个带API凭证、能访问内部工具的智能体。原始任务结束后它还在运行,而归属、权限和活动都缺乏有效监控。

这些是说明性场景,不是对某起具体事件的指控。它们说明的是:影子AI必须同时被当作数据治理问题和访问控制问题来处理。

它是一条不受治理的执行路径

影子AI不只是资产清单问题,它是一条连接用户、AI模型、企业数据、凭证和下游系统的失控执行路径。

可以把它建模成一座没有登记的桥。AI智能体可能从邮件、网页或检索到的知识源里吞进不可信的指令,然后生成一个工具调用,去读取敏感文件、调用API或修改业务记录。如果这个智能体权限过大,且它的动作没有经过独立验证,一次提示注入攻击或模型错误,就能跨过"生成文本"和"影响真实系统"之间的边界。

可防御的架构,要求把模型推理和执行权限分开:

  • 策略执行:每个敏感动作都应经过可信的策略执行层,核验发起身份、资源权限、请求操作、数据敏感度和已批准的工作流范围。检索到的内容要当作不可信数据处理,而不是当作覆盖策略的许可。
  • 密钥管理:凭证应尽可能留在模型可见上下文之外,通过密钥保险库或可信工具代理管理,权限范围要窄、令牌要短命、吊销要可靠。
  • 运行时监控:把身份事件、检索活动、工具调用、授权决策和下游结果关联起来,才能发现孤立检查提示词时漏掉的可疑序列。
  • 事件遏制:提前设计好遏制手段,让响应者能暂停智能体、吊销其凭证、禁用被攻陷的集成并保留审计证据。对高影响操作,强制人工批准或二次认证。执行机制失效时,敏感动作应当默认拒绝,而不是悄悄绕过控制。

关键的安全原则是:AI模型可以提议一个动作,但它绝不能成为批准自己访问权限的那个权威。

传统安全控制为什么看不见它

传统安全项目通常围绕已知应用、受管身份、已批准终端和记录在案的数据流来设计。影子AI可以从几个方向绕开这套可见性:

  • 数据从合法通道流出:员工可能通过普通的加密连接访问AI服务。仅靠网络可见性,也许能识别目的地,却看不到提交了什么敏感信息。
  • 批准不等于行为安全:即便是被认可的AI应用,也可能被用来处理超出批准用途的数据。授权智能体如果权限和运行时行为没被恰当约束,同样可能尝试未授权动作。
  • 凭证放大潜在影响:AI工具和智能体可能使用API密钥、OAuth授权或其他凭证。这些凭证一旦权限过大、管理不善或泄露,风险就超出模型本身。
  • 清单很快过时:团队添加AI功能、浏览器扩展、模型API、智能体框架和集成的速度,快过人工审查流程。

结果就是可见性缺口:安全团队可能知道哪些AI工具被批准了,却不知道哪些工具实际在用,也不知道它们能访问什么。

务实防御:发现、治理、执行

答案不一定是禁用AI。一刀切限制会打击员工上报正当用例的意愿,把活动推向更隐蔽的渠道。更强的做法有四层:

  1. 发现真实AI使用情况:建立清单,覆盖外部AI服务、SaaS内嵌功能、开发者工具、浏览器扩展、模型API、MCP服务器和AI智能体。用终端遥测、身份与OAuth日志、SaaS管理记录、网络元数据和云监控。没有单一来源能提供完整可见性,必须跨系统关联证据。
  2. 分类数据并定义可接受使用:明确哪些信息可以由哪些AI服务处理。公开信息、内部业务文档、客户记录、受监管数据、源代码和凭证,不该享受同等待遇。评估供应商和集成时,看数据保留、训练实践、访问权限、合同要求和可用的审计控制。
  3. 执行最小权限:只给AI应用和智能体完成特定任务所需的访问权。使用范围受限的凭证、尽量短命的令牌、受限的工具权限,对后果重大的动作要求明确批准。一个负责总结文档的智能体,不该自动获得发邮件、改财务记录或访问无关数据库的权限。
  4. 监控运行时行为:清单和批准是必要的,但不能证明每个动作都安全。运行时控制应评估敏感数据访问、工具调用、权限变更、可疑工作流,以及试图超出智能体授权范围的举动。视架构而定,控制手段可以阻断动作、要求人工批准或吊销访问权。

这里有个关键区分:身份控制帮助确定谁或什么拥有访问权;运行时安全帮助判断当前这个动作是否应该被允许。

30天起步计划

  • 第1周——发现:识别已在使用的AI服务、扩展、集成、模型API和智能体。
  • 第2周——评估:优先处理涉及敏感数据、宽泛权限、无人管理的凭证和外部数据传输的暴露面。
  • 第3周——治理:发布清晰的使用规则,为常见员工工作流提供已批准的替代方案。
  • 第4周——执行:引入最小权限访问、适当监控、基于风险的审批,以及审查新发现AI工具的流程。

使用情况在变,发现和重估就要持续做。一次性的清单很快就会过时。

几个常见疑问

影子AI指未经组织必要批准、监督或安全控制而使用的AI工具、功能、集成或智能体。它的风险在于制造未经审查的数据流、无人管理的第三方访问和潜在的合规缺口,让敏感公司数据流经安全团队看不见也控制不了的基础设施。

它并不总是恶意的。它常常始于善意的员工想提高效率或快速解决问题。安全问题不来自恶意意图,而来自未审查的数据暴露、过大权限,以及未获批准的工具使用所伴随的责任缺失。

检测需要跨多个来源关联数据:把终端和应用发现,与身份及OAuth日志、SaaS配置审查、API和网络遥测、开发者工具清单结合起来。没有单一来源能提供完整可见性,跨系统关联是必需的。

封禁对特定高风险服务可能是合适的,但它替代不了可见性、可用的已批准替代方案、清晰的数据处理规则和运行时执行。控制应针对真实风险,而不是依赖一刀切禁令——那往往只是把使用赶到更地下。

影子AI描述的是未授权使用,AI运行时安全则聚焦在AI运行过程中观察和控制其行为。即便部署了一个未授权或配置不当的智能体,运行时执行(如策略执行点和最小权限的工具执行)也能约束高风险动作,防止一次模型错误或提示注入演变成全面的企业入侵。

下一次AI安全事件,可能不是始于什么高明的模型漏洞利用。它可能始于一个未经审查的集成、一个暴露的凭证,或一个没人知道它能访问敏感系统的智能体。组织治理不了自己发现不了的东西,而光发现也不够。找到AI,弄清它的访问权,治理它的数据流,在它行动时守住安全边界。模型可以被操纵,安全边界必须守得住。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
战争爆发前的预兆出现!美国已经有4个征兆,张召忠预言要成真?

战争爆发前的预兆出现!美国已经有4个征兆,张召忠预言要成真?

画卷
2026-10-08 19:17:31
A股:刚刚,国家发改委重磅发布!做好准备,明日将迎来新的变化

A股:刚刚,国家发改委重磅发布!做好准备,明日将迎来新的变化

虎哥闲聊
2026-10-23 00:00:04
SK海力士盘中转涨

SK海力士盘中转涨

证券时报
2026-10-23 09:18:24
“黜免” 不读 chuò miǎn,正确读音是什么,别不会!

“黜免” 不读 chuò miǎn,正确读音是什么,别不会!

语丝纪
2026-10-23 07:50:39
多数美国人盼下届国会关注民生和结束伊朗战事

多数美国人盼下届国会关注民生和结束伊朗战事

极目新闻
2026-10-23 08:24:22
各科老师骂人经典语录,你还记得吗?网友:我去买几个橘子,你就在此地,不要走动

各科老师骂人经典语录,你还记得吗?网友:我去买几个橘子,你就在此地,不要走动

解读热点事件
2026-10-20 00:05:15
嫁给印度阿三的东北女子丹丹近况:自曝不再去印度,还是在中国买房生活稳妥

嫁给印度阿三的东北女子丹丹近况:自曝不再去印度,还是在中国买房生活稳妥

小徐讲八卦
2026-10-22 11:26:03
“掮客” 的掮 不读jiān ,不要再读错了!

“掮客” 的掮 不读jiān ,不要再读错了!

语丝纪
2026-10-23 07:49:20
事发上海地铁,爷叔突然急得大哭,慌乱比划!民警递上纸笔,两个字找到线索

事发上海地铁,爷叔突然急得大哭,慌乱比划!民警递上纸笔,两个字找到线索

环球网资讯
2026-10-23 08:03:55
Netflix再爆人事震荡:电影主管林暐被曝离职,裁员已波及千人

Netflix再爆人事震荡:电影主管林暐被曝离职,裁员已波及千人

追星雷达站
2026-10-22 03:44:45
已经42岁,弟媳:这或将是我职业生涯的最后几场比赛

已经42岁,弟媳:这或将是我职业生涯的最后几场比赛

懂球帝
2026-10-22 13:23:35
美国兵推结果:中美开战7天后4万解放军阵亡,美10多个基地损毁

美国兵推结果:中美开战7天后4万解放军阵亡,美10多个基地损毁

最新声音
2026-10-22 20:32:09
遵义会议交出权力后,博古去哪了?此后11年他又经历了什么?

遵义会议交出权力后,博古去哪了?此后11年他又经历了什么?

掠影后有感
2026-10-23 09:57:15
纳指重挫近700点!存储芯片股再度大跌,原油价格大涨

纳指重挫近700点!存储芯片股再度大跌,原油价格大涨

澎湃新闻
2026-10-23 08:34:29
房地产,要破“双8”了

房地产,要破“双8”了

城市财经
2026-10-21 11:42:28
蛇冬眠的时候有多危险?一个专业捕蛇人坦言:90% 的人根本想不到,蛇进入冬眠,它就可能变成老鼠的一顿大餐

蛇冬眠的时候有多危险?一个专业捕蛇人坦言:90% 的人根本想不到,蛇进入冬眠,它就可能变成老鼠的一顿大餐

扶苏聊历史
2026-10-21 16:34:58
名字太长办事难?蒙古族汉姓妙招,维吾尔族身份证也能更简洁

名字太长办事难?蒙古族汉姓妙招,维吾尔族身份证也能更简洁

时尚的弄潮
2026-10-22 02:49:21
赢球不到24小时,张本美和再破"天花板",带领日乒女队亚锦赛夺冠

赢球不到24小时,张本美和再破"天花板",带领日乒女队亚锦赛夺冠

兵鉴史
2026-10-23 11:03:48
比尔盖茨表示:他这辈子犯过最大的错误,就是把原本属于微软的移动生态,拱手让给了安卓

比尔盖茨表示:他这辈子犯过最大的错误,就是把原本属于微软的移动生态,拱手让给了安卓

元气科技馆
2026-10-10 21:56:30
问界回应车辆起火事故,初步分析为高速情况下车辆机舱遭受剧烈撞击引发线路短路及油液泄漏 导致起火燃烧

问界回应车辆起火事故,初步分析为高速情况下车辆机舱遭受剧烈撞击引发线路短路及油液泄漏 导致起火燃烧

每日经济新闻
2026-10-22 12:42:40
2026-10-23 12:07:00
固件更新中
固件更新中
有态度网友ytd
232文章数 83关注度
往期回顾 全部

科技要闻

抢运营商饭碗!马斯克又有大动作

头条要闻

牛弹琴:普京最新表态砍出五刀 一刀更比一刀狠

头条要闻

牛弹琴:普京最新表态砍出五刀 一刀更比一刀狠

体育要闻

没人看好的加图索,打出队史最佳开局

娱乐要闻

高梓淇向女友求婚,被女方父母接受

财经要闻

娃哈哈集团董事长许思敏离职

汽车要闻

奥迪中国换帅 张俊任总裁 鲁文墨代理奥迪运动业务

态度原创

时尚
本地
游戏
房产
公开课

“风衣+裙子”才是今年秋天绝美搭配,这样搭显瘦还时髦

本地新闻

一场垂直登高赛跑出了"山城"的真正内核

《追逐末日之光》试玩版已上线新品节

房产要闻

租金大跳水!荒了6年,海口这个地标商业,开始急了!

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版