网易首页 > 网易号 > 正文 申请入驻

第一波黑客已经用大模型搞网络攻击了 | To B产业观察

0
分享至


图片系AI生成

在新技术和产业的发展史上,安全始终是一门伴生技术,总是先有攻击,再有防护,大模型也不例外。

“新的技术必然带来新的安全问题和安全需求,但是挑战又在于攻击者往往快我们一步发现安全风险,发动攻击,因此要求我们带来更快地响应和改变。”亚信安全高级副总裁陈奋表示。

直到今天,大模型的落地场景依然有限,行业人士会考虑新技术不成熟、投入产出比、没有好的应用方向等因素,但黑客们只需要一个理由,用大模型做新的矛,能攻破更高价值的盾。

攻击方式决定了防守方式,网络安全公司标配大模型也成为必选项。

全球安全公司快速行动起来,微软在5月份正式商用了Security Copilot,谷歌去年发布了网络安全专有大模型,网络安全巨头Paloalto、CROWDSTRIKE均在其安全运营平台集成了大模型的安全运营能力。

相关数据显示,在中国,80%以上的网络安全公司都在将大模型技术集成到网络安全产品中,30%的公司已经开始做大模型安全的研究,也出现了一些安全创业的浪潮。

新的安全攻防战

ChatGPT发布之后,以大模型为代表AGI技术让全球的黑客开始狂欢,AGI技术驱动了网络攻击和网络犯罪的升级,过去一个黑客生产一个攻击病毒需要数月时间,现在通过AGI的工具可能几分钟就能生成,黑客攻击的效率和范围大大提高。

大模型对于编程语言的理解能力也非常强,攻击者可以利用大模型迅速发现软件漏洞,同时还有一波急功近利的黑客,利用AI算法在视频中做人脸伪造,产生了新一波网络诈骗犯罪案件。

亚信安全还发现,攻击者的攻击目标从传统资产盯上了AI算力基础设施和大模型AI算力基础设施主要是高价值的GPU集群,对攻击者来说具有巨大的诱惑力,短短一年时间,针对大模型的攻击手段已经涌现出数十种不同的类型。


年初美国一个数千台服务器的算力集群被攻破,被拿去挖比特币,黑客只要发现有利可图,很快就会盯上这些高价值的资产,甚至大模型本身也有可能被利用。

亚信安全还复现了一次攻击行为,通过向大模型提交一个经过特殊构造的攻击样本,攻击样本不是正常的提示词,而是很复杂的语言,这时候再提交正常的请求,在过程中亚信安全还特意把攻击停止,但哪怕停止攻击以后,同样的一个请求,大模型需要60秒以上才能返回结果,是原来所需时间的20倍以上。

可以想象,如果未来核心应用都是大模型驱动的AI原生应用,类似攻击将会让大模型算力消耗急剧上升,从而出现拒绝攻击,用户核心业务将陷入瘫痪,这只是一个相对比较基础的攻击。

未来家庭和个人用户,也可能成为攻击目标,假如人工智能的渗透率足够高,电脑、手机、家电和汽车都是智能的,甚至未来每个家庭都有一个人工智能,黑客不会放过这一块“肥肉”。

“从现在开始,网络安全的攻防从原来人和人之间的对抗,已经升级到AI和AI之间的对抗,只有AI驱动的网络安全防护检测技术才能识别AI驱动的黑客攻击技术。”陈奋表示。

“安全大模型”,是不是蹭热点?

如同千行百业都正在被大模型改造和重塑,大模型技术未来将推动网络安全产品全面革新,可能带来网络安全产品设计范式的彻底变化,从威胁检测到产品体验,再到安全运营,如果没有大模型的加持,一家安全公司可能就难言竞争力。

但是,“安全大模型”概念的泛化,也难免陷入蹭热点之嫌,以至于有质疑安全大模型是新瓶装旧酒。

安全公司使用AI技术早有先例,例如用AI做垃圾邮件检测,用机器学习算法做漏洞自动化修复,AI还能实现自动化的运营分析,安全策略生成,并提供告警评估和攻击研判等。

一位安全行业人士表示,很多安全公司去年着急发布GPT应用,产品构建并不完整,有企业只想着在单点场景使用,比如在安全运营里快速集成GPT对语言的理解,因为安全事件也是一种语言,更多是落在这种场景上。

亚信安全没有第一时间发布大模型,更多是在思考大模型能否变成产品的原生能力。亚信安全想把大模型能力变成产品的内生能力,现在可能还达不到,但这是其发展思路。

所以亚信安全没有一开始就让产品线马上集成大模型,而是因为花了更多时间建设底层通用框架,做好MaaS服务平台,再叠加上面的智能体框架。安全公司有很多产品线,如果每条产品线路都要单独去思考怎么集成大模型,会带来很多资源浪费。


在此基础上,亚信安全正式发布了网络安全行业领域自研大模型——信立方,其能力分为五个层次,第一层是算力调度平台;第二层是在微调开源大模型和闭源大模型基础上做智能的混合调度;第三层是在大模型基础之上做MaaS服务层,让上层的安全应用能够快速调度大模型,同时MaaS服务的API架构完全参考OpenAI的标准,从而能够快速使用全球开源工具的生态。

第四层是网络安全Agent灵活架构,亚信安全在参考开源基础上重构了亚信安全的智能体开发框架,在该框架上,所有产线团队能够快速集成整个安全大模型能力。第五层是多个场景的安全智能体应用。

同时,亚信安全进一步发布“信计划XPLAN”,包含两部分:Security For AI和AI For Security。Security For AI主要聚焦在保护算力安全的基础设施,以及保护大模型的安全,AI For Security主要聚焦在网络安全行业的垂直大模型的研发以及在上面做网络安全的智能体以及安全应用。

AI安全需要系统视角

中国工程院院士、清华大学智能产业研究院(AIR) 院长张亚勤表示,大模型的到来意味着构建了一个全新的生态,大模型将成为新的操作系统,PC互联网、移动互联网都形成了与之匹配的生态,人工智能时代的生态规模移动互联网要高至少一个数量级。

与之相对应地,行业内部趋于达成一个共同认知——只做大模型安全,无法解决大模型安全问题,AI安全需要从系统性全局视角,共建生态。

亚信安全高级副总裁兼CDO吴湘宁表示,大模型产业链非常长,周边业态会更加丰富,真正做大模型的厂商不会多,未来可能集中在几家头部厂商,而利用大模型的企业或者行业会越来越多,这就对安全方面提出了新的要求。


图片系AI生成

“仅把大模型安全做得好比较有限,举一个简单例子,原来隐私计算应用的场景非常狭小,更多是一些部委、金融和企业数据交换过程中做一些查询,但是未来如果所有的企业都要把数据送到算力上去算的话,想象空间就非常大,整个生态链打开以后,可能很多技术使用场景都会发生改变。”他说。

多项安全生态合作与成果也在逐渐显露。网络勒索响应与治理中心暨猎狐计划正式启动,由亚信安全、中国联通江苏分公司、四川省数字产业有限责任公司、人民数据管理有限公司联合发起,建立区域性和行业性的网络勒索响应与治理中心,形成常态化一体化的网络勒索安全运营,这也是安全生态共建的一个典型。

此外,东数西算安全联合创新中心也发布了新成果,亚信安全与四川能投、西云算力等厂商合作,在大模型安全、隐私计算、算网调度、全栈云安全均有技术突破。这些成果将推动东西部算力和数据资源的安全调度和流通,促进人工智能和数据产业的发展。

亚信安全也与鸿蒙生态达成合作,双方将深度投入鸿蒙生态建设,结合终端安全能力,为用户提供更加安全、可靠的终端环境,保障用户的信息安全。

在技术、政策、法规、社会共识等多方面的共同努力,将成为大模型安全生态构建的长久方向。(本文首发于钛媒体APP,作者 | 张帅,编辑 | 盖虹达)

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
土媒:穆里尼奥入主费内巴切后,引援名单已锁定至少四名球员

土媒:穆里尼奥入主费内巴切后,引援名单已锁定至少四名球员

直播吧
2024-06-16 20:24:02
刘青山死后30年,三个儿子找到当年举报者李克才:请为我父亲平反

刘青山死后30年,三个儿子找到当年举报者李克才:请为我父亲平反

史墨弦
2024-06-14 16:02:18
楼市数据出炉,很多人看傻眼了!

楼市数据出炉,很多人看傻眼了!

山丘楼评
2024-06-17 01:28:57
吉达联合主席:我们14亿欧报价梅西,他竟然因家人想去美国而拒绝

吉达联合主席:我们14亿欧报价梅西,他竟然因家人想去美国而拒绝

直播吧
2024-06-16 19:00:08
最强预言家盲眼龙婆,预测2024年7大事件,世界格局或因此改变

最强预言家盲眼龙婆,预测2024年7大事件,世界格局或因此改变

飞云如水
2024-04-18 07:11:50
央视解说:埃里克森用心脏停下了球破门,用进球回报他的丹麦队友

央视解说:埃里克森用心脏停下了球破门,用进球回报他的丹麦队友

直播吧
2024-06-17 00:40:15
曾经的两个好朋友,已成两敌人,再想买先进装备是没地方可买了

曾经的两个好朋友,已成两敌人,再想买先进装备是没地方可买了

历史与财经
2024-06-12 12:52:02
被中国代表团强势发言震惊了!果然只有腰杆硬了才有话语权 太炸裂

被中国代表团强势发言震惊了!果然只有腰杆硬了才有话语权 太炸裂

开玩笑的水母
2024-06-11 17:57:00
广州就“高仿假货”问题成立联合工作组:所有涉案档口已被查封

广州就“高仿假货”问题成立联合工作组:所有涉案档口已被查封

极目新闻
2024-06-16 23:58:03
庐山会议上这4位元帅没留下任何发言记录,分别是谁?为啥会这样

庐山会议上这4位元帅没留下任何发言记录,分别是谁?为啥会这样

陪伴孤独
2024-06-17 02:15:31
17岁中专生和清北选手一起比赛!“天才少女”姜萍火了,能否破格进浙大?学校回应!父亲发声

17岁中专生和清北选手一起比赛!“天才少女”姜萍火了,能否破格进浙大?学校回应!父亲发声

每日经济新闻
2024-06-15 00:01:06
160枚火箭弹从天而降,以军司令部当场被炸,美英法德集体失声!

160枚火箭弹从天而降,以军司令部当场被炸,美英法德集体失声!

绝对军评
2024-06-15 05:40:06
深入讲一下姜萍为什么要用国外的英文教材!

深入讲一下姜萍为什么要用国外的英文教材!

妮子说美食
2024-06-16 08:15:04
长期服用倍他乐克,现在基本上撑不过1分钟,还要不要继续吃?

长期服用倍他乐克,现在基本上撑不过1分钟,还要不要继续吃?

神经外科杜医生
2023-05-22 11:55:41
浙大婉拒后,姜萍深造之路有三条,是清华丘成桐领军人才还是哈佛

浙大婉拒后,姜萍深造之路有三条,是清华丘成桐领军人才还是哈佛

大树成长营
2024-06-16 21:03:06
玫瑰的故事热播,刘亦菲用58万的裙子,打了多少国产剧假穷人的脸

玫瑰的故事热播,刘亦菲用58万的裙子,打了多少国产剧假穷人的脸

子芫伴你成长
2024-06-16 22:48:25
10年前,两位“夺刀少年”因救人错过高考,拒绝保送后如今怎样了

10年前,两位“夺刀少年”因救人错过高考,拒绝保送后如今怎样了

文史达观
2024-06-09 06:45:02
上海市一栋独栋大别墅拍卖,才753万竟没人要流拍了,单价才1万多

上海市一栋独栋大别墅拍卖,才753万竟没人要流拍了,单价才1万多

石辰搞笑日常
2024-06-16 19:52:01
一步之遥!凯尔特人若夺冠,将会引发8大蝴蝶效应

一步之遥!凯尔特人若夺冠,将会引发8大蝴蝶效应

阿牛体育说
2024-06-16 16:56:58
NBA总决赛看似凯尔特人输了实际上赢了!实际上只有牛爷爷输了。

NBA总决赛看似凯尔特人输了实际上赢了!实际上只有牛爷爷输了。

阿牛体育说
2024-06-16 13:54:41
2024-06-17 04:56:49
钛媒体APP
钛媒体APP
独立财经科技媒体
103043文章数 858538关注度
往期回顾 全部

科技要闻

iPhone 16会杀死大模型APP吗?

头条要闻

冷藏货车违规乘人致8人窒息后遇难 河南叶县通报

头条要闻

冷藏货车违规乘人致8人窒息后遇难 河南叶县通报

体育要闻

没人永远年轻 但青春如此无敌还是离谱了些

娱乐要闻

上影节红毯:倪妮好松弛,娜扎吸睛

财经要闻

打断妻子多根肋骨 上市公司创始人被公诉

汽车要闻

售17.68万-21.68万元 极狐阿尔法S5正式上市

态度原创

亲子
时尚
游戏
家居
公开课

亲子要闻

玩这个游戏的都是勇士

伊姐周日热推:电影《沙漏》;动漫《眷思量2》......

梦幻西游玩家炸出160愤怒水清腰带,西栅为服战连夜换“网吧”?

家居要闻

空谷来音 朴素留白的侘寂之美

公开课

近视只是视力差?小心并发症

无障碍浏览 进入关怀版