网易首页 > 网易号 > 正文 申请入驻

平均安全通过率仅56%,AI写的代码为何仍难保证安全

0
分享至

现代模型生成的代码,语法正确率接近100%。Veracode的2026年报告里把这件事说得很直白:"语法问题实际上已经解决了。" 这听起来像个里程碑。但它恰恰是你现在遇到麻烦的原因。同一份报告测试了一百多个模型,发现平均安全通过率只有56%,"与第一份报告中的55%相比几乎没有变化",大约44%的生成任务会引入一个危险漏洞。 功能正确性和安全性,最终被证明是两个独立的问题。而其中只有一个接近被解决。 这个结果既不是孤例,也不新鲜。2022年IEEE安全与隐私会议上,纽约大学Tandon分校的一个团队让GitHub Copilot跑了89个安全相关场景,生成了1689个程序,发现其中大约40%存在MITRE CWE Top 25中的漏洞。这篇论文后来被选为《Communications of the ACM》的研究亮点。 2024年11月,乔治城大学安全与新兴技术中心评估了五个大语言模型,报告称它们生成的代码片段中,几乎一半含有可被利用的缺陷。 四年时间,四支独立团队,四套方法论,每一次都得出同样的答案。 2023年ACM CCS会议上,斯坦福大学的Neil Perry、Megha Srivastava、Deepak Kumar和Dan Boneh把开发者放进了实验里:47名参与者,五项安全相关的编程任务,三种语言,其中33人配了AI助手,14人没有。使用助手的那组写出的代码安全性明显更低,而且更倾向于相信自己写的代码是安全的。 这是一项小规模研究,但它解释了为什么这个问题不会自我纠正:正常情况下能抓住问题的机制——开发者对自己担心的代码多看一眼——恰恰是工具关掉的那个机制。 上述研究测量的都是应用代码。但基础设施代码是更棘手的情况,因为一个配置错误的安全组永远不会失败:它完全按照写的那样工作,向任何请求的人提供流量,唯一会提出异议的,是读diff的那个人。 没有人能靠阅读来审查这个体量,我也不能。能做的是把规则写下来,写成一种计算机在每次变更时都会检查的形式——这就是Policy as Code的含义。 在一份实操手册中,作者带你构建这套检查:指向一个真实的漏洞仓库,看着最显而易见的版本放过眼前九个违规中的五个,然后修复它。 最终你会知道如何做到这些事: - 针对 terraform show -json 产出的JSON编写Rego策略 - 像测试应用代码一样测试策略,用fixture和覆盖率报告 - 构建一个带退出码契约的命令行闸门,让CI流水线可以信任它 - 在Kubernetes准入阶段用CEL拦截不合规的工作负载 - 让模型写一条策略,再由 opa check 和你自己的测试决定是否保留 - 用同一个策略引擎为AI智能体的工具调用做授权 手册里给出了几个关键术语的直白解释。Policy as Code,是把组织已经达成一致的规则写成一个程序,它接收一个提议的变更并返回一个决定。Rego,是Open Policy Agent评估的查询语言,它是声明式的:一条规则体就是一组必须全部成立的条件。 Plan JSON,是Terraform即将做什么的机器可读描述,由 terraform show -json 生成。策略读的是它,所以你的 .tf 文件永远不会到达策略那里。 准入控制,是Kubernetes API服务器内部的一个点,对象在被存储之前可以在这里被拒绝。CEL,即Common Expression Language,是Kubernetes在API服务器内部原生评估的小型表达式语言,不需要部署webhook。 还有一个词值得单独记住:false clearance,指策略放过了本应失败的一个资源。没有人会注意到这种情况,所以除非你主动去找,它永远不会被测量。 同样的判断发生在三个地方,只有中间那个是Kubernetes特有的。


特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
洪秀柱曾爆猛料,称若民进党胜选,很怀疑台湾地区领导人是美国人

洪秀柱曾爆猛料,称若民进党胜选,很怀疑台湾地区领导人是美国人

白色得季节
2026-09-28 19:29:12
日本防卫大臣狂言“不设禁忌讨论核武器和核潜艇”,外交部:“拥有核武器”不是日方想不想讨论的问题,没有讨价还价的余地

日本防卫大臣狂言“不设禁忌讨论核武器和核潜艇”,外交部:“拥有核武器”不是日方想不想讨论的问题,没有讨价还价的余地

每日经济新闻
2026-10-01 11:17:46
曹轶欧回忆:1933年康生亲手用斧头劈死了顾顺章家属!

曹轶欧回忆:1933年康生亲手用斧头劈死了顾顺章家属!

喜喜江江
2026-09-29 07:25:06
暴雨大暴雨,局地降温10℃以上!新一轮降温降雨来袭,昆明→

暴雨大暴雨,局地降温10℃以上!新一轮降温降雨来袭,昆明→

掌上春城
2026-10-01 21:35:01
知名投资人曝刘欢真正死因!大家都猜错了,8月他在餐厅状态不错

知名投资人曝刘欢真正死因!大家都猜错了,8月他在餐厅状态不错

笑饮孤鸿非
2026-09-29 03:04:49
钱再多又如何?52岁刘强东手握千亿身家,儿子成了一生的遗憾

钱再多又如何?52岁刘强东手握千亿身家,儿子成了一生的遗憾

莫地方
2026-08-23 19:19:07
1948年,陈毅曾在一份内部报告中坦言:单论个人军事素质,华野基层的许多连长不如国军普通士兵

1948年,陈毅曾在一份内部报告中坦言:单论个人军事素质,华野基层的许多连长不如国军普通士兵

饭小妹说历史
2026-09-30 09:31:41
吴奇隆时隔35年重返天安门庆国庆!笑容满面复刻当年小虎队合影

吴奇隆时隔35年重返天安门庆国庆!笑容满面复刻当年小虎队合影

韩小娱
2026-10-01 21:04:27
外国人对中国人“一天吃三顿”感到震惊,这反映了哪些饮食文化差异?

外国人对中国人“一天吃三顿”感到震惊,这反映了哪些饮食文化差异?

向航说
2026-09-17 12:49:26
开拓者对内线新援的能力非常认可,他能胜任空间型大前锋的角色?

开拓者对内线新援的能力非常认可,他能胜任空间型大前锋的角色?

稻谷与小麦
2026-10-02 00:05:13
一夫一妻制逐渐难维持!社会学家分析:未来3种模式将成为主流

一夫一妻制逐渐难维持!社会学家分析:未来3种模式将成为主流

王二哥老搞笑
2026-09-24 07:26:29
开局之年看中国·潮涌荆楚|如果信念有颜色,那一定是中国红

开局之年看中国·潮涌荆楚|如果信念有颜色,那一定是中国红

极目新闻
2026-10-01 17:24:08
有人提出如果粤语是秦军队带过来,陕西人应能讲粤语,评论爆了

有人提出如果粤语是秦军队带过来,陕西人应能讲粤语,评论爆了

文章创新
2026-09-29 07:09:34
男不男女不女!穿裙子露大腿的周深,鸟巢献唱才2天恶心一幕发生

男不男女不女!穿裙子露大腿的周深,鸟巢献唱才2天恶心一幕发生

林轻吟
2026-10-01 07:15:56
伊朗:已收到美国对伊方有关结束战事提议的回应

伊朗:已收到美国对伊方有关结束战事提议的回应

新京报
2026-09-30 17:03:14
特朗普刚放话卖中国武器,转头就否认:我没说过!日本吓出一身汗

特朗普刚放话卖中国武器,转头就否认:我没说过!日本吓出一身汗

启迪你的思维
2026-10-01 23:42:21
夸雷斯马谈C罗离队:认可历史地位,但葡萄牙的球衣没人能凌驾!

夸雷斯马谈C罗离队:认可历史地位,但葡萄牙的球衣没人能凌驾!

体育闲话说
2026-10-01 09:19:30
《余红旧事》口碑大爆,本是冲马伊琍来的,却被40岁跨界歌手惊艳

《余红旧事》口碑大爆,本是冲马伊琍来的,却被40岁跨界歌手惊艳

寒士之言本尊
2026-09-30 15:30:44
9名中国公民在埃及阿斯旺省交通事故中受伤

9名中国公民在埃及阿斯旺省交通事故中受伤

新华社
2026-10-01 19:33:08
安踏,快被自己养大的“小弟”挤下主位了!

安踏,快被自己养大的“小弟”挤下主位了!

可乐爱微笑
2026-09-03 22:56:06
2026-10-02 00:24:49
固件更新中
固件更新中
有态度网友ytd
265文章数 78关注度
往期回顾 全部

科技要闻

5999元起!华为Mate 90系列发布

头条要闻

美国一女囚犯被执行死刑 注射两剂药物后其"鼾声大作"

头条要闻

美国一女囚犯被执行死刑 注射两剂药物后其"鼾声大作"

体育要闻

“今天的表现,我们可以昂首离开球场”

娱乐要闻

奚梦瑶晒四太豪礼!22只龙凤镯近300万

财经要闻

智谱发上亿Token 能挽回开发者信任吗?

汽车要闻

2027款极氪001将于明年一季度上市 现款猎装同步推新配色

态度原创

房产
家居
时尚
本地
军事航空

房产要闻

4000+/平!华侨城,直接把海口楼市的地板给掀了!

家居要闻

2026建博会(广州) 公装联探展交流活动

在米兰,用时装唤醒内心的自我

本地新闻

中秋逛白塔寺,体验国医妙荟雅集

军事要闻

美防长宣布组建“自主作战司令部”

无障碍浏览 进入关怀版