网易首页 > 网易号 > 正文 申请入驻

“以魔治魔”,解决大模型“幻觉”等安全问题

0
分享至

中新网北京7月6日电(中新财经记者 吴涛)随着AI大模型的发展,新技术应用不断加码的同时,网络威胁也随之升级。提升安全防护能力,筑牢安全基线,成为发展数智技术的关键。

2024年7月2日至5日,2024全球数字经济大会在北京举行。中新网记者 吴涛 摄

在2024全球数字经济大会期间举办的多个分论坛上,不少嘉宾都提到了AI安全话题,要用“魔法打败魔法”,AI驱动提升网络安全攻防能力。不少网络安全产品一个重要指标便是“含AI量”。

AI衍生出新安全问题

据多位业内人士介绍,大模型发展的同时,也带来了非常复杂的安全问题,同时还降低了网络攻击的技术门槛,借助AI能力,攻击者越来越走向自动化、智能化和武器化,甚至造成安全防御的整体瘫痪。

赛迪顾问总裁助理高丹表示,涉及到的安全问题首先就是“幻觉”问题。“你问AI大模型一个问题,它可能说得清清楚楚,但其实都在瞎说,真假难辨”。

360数字安全集团总裁胡振泉表示,人工智能的算法可能存在数据投毒攻击、恶意样本攻击;生成式人工智能在对话交互的过程当中也可能存在数据非法获取、泄露和滥用等问题;还有很多利用人工智能制作虚假视频进行诈骗、敲诈勒索等非法活动。

清华大学长聘副教授张超表示,网络安全第一阶段是“人做攻防”,第二阶段是“机器攻防”。自2017年开始,已经进入第三阶段“智能攻防”,即用AI来做漏洞攻防相关研究,现在一些领先的安全企业已经强调用AI来做全自动攻防的机器人。

逆向利用大模型

该如何解决AI时代带来的安全问题?中国工程院院士沈昌祥在大会期间的分论坛上表示,数据安全治理需要做到全程管控,要实现首先让进攻者“进不去”,进去后“拿不到”数据,接着因为数据被加密“看不懂”,并且系统带有自动免疫功能,让进攻者“改不了”数据。

“大模型一个典型应用是信息缺失之后模型帮你补偿出来,比如文生图、文生视等。如果用在安全上呢?”张超表示,黑客针对目标软件,需要拿到一个目标软件漏洞然后攻击它,第一步就需要去理解它、分析它,这个地方叫逆向工程,因为没有源代码,可以使用一些AI软件把它逆向出来。

高丹认为,解决大模型“幻觉”等安全问题,首先要保证数据安全,数据不被泄露;第二数据源本身是干净的;第三要加强算法研究。从算法的角度来说,我们的算法能力越强,就能够减少相对的“幻觉”。

胡振泉认为,AI技术和数字安全的融合发展已经成为行业高度关注的课题,要用“以魔治魔”的理念,来解决人工智能面临的安全问题,也就是研发安全大模型,用人工智能来解决人工智能的安全问题。

沈昌祥还表示,不仅仅要做好预防,还要能在发现故障后及时采取措施确保稳定运行,保证设备“瘫不了”,最后还要确保行为可追溯“赖不掉”,因此我们还要打造安全可信的产业新生态,筑牢数字经济安全的基座。(完)

来源:中国新闻网

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
赵又廷自曝影视行业寒冬,半年只接10个剧本,不愿让女儿进演艺圈

赵又廷自曝影视行业寒冬,半年只接10个剧本,不愿让女儿进演艺圈

韩小娱
2026-07-21 17:13:13
网友称女子想在火车下铺床下空间放行李,下铺旅客不同意发生争执,12306回应:没有规定下铺旅客可以独享下方空间,可找列车员协调

网友称女子想在火车下铺床下空间放行李,下铺旅客不同意发生争执,12306回应:没有规定下铺旅客可以独享下方空间,可找列车员协调

洪观新闻
2026-07-22 22:33:22
法官批准15亿美元和解:每本盗版书赔3千,91%作者已认领

法官批准15亿美元和解:每本盗版书赔3千,91%作者已认领

报错免疫体
2026-07-22 04:11:13
coco彻底不装了!连爆张柏芝猛料,直言跟谢贤恋爱 是最大的烦恼

coco彻底不装了!连爆张柏芝猛料,直言跟谢贤恋爱 是最大的烦恼

闻识
2026-06-03 00:11:15
5年2.5亿!摆脱跟腱撕裂!欢迎东部第一组织控卫

5年2.5亿!摆脱跟腱撕裂!欢迎东部第一组织控卫

篮球实战宝典
2026-07-22 23:43:10
10亿都救不了一命!京东副总裁蔡磊,生命进入倒计时

10亿都救不了一命!京东副总裁蔡磊,生命进入倒计时

听风喃
2026-04-06 11:16:04
爱泼斯坦被曝不满女秘书纹身,直接割除皮肤,随叫随到供他性侵

爱泼斯坦被曝不满女秘书纹身,直接割除皮肤,随叫随到供他性侵

译言
2026-07-21 08:49:33
一封家长感谢信刷屏!深圳一小学老师查看监控意外发现:全班44名学生接力陪伴,托举低谷中的同班少年

一封家长感谢信刷屏!深圳一小学老师查看监控意外发现:全班44名学生接力陪伴,托举低谷中的同班少年

深圳晚报
2026-07-23 10:29:40
2026年这5个行业,竟已发不出工资!形势真的很严峻了

2026年这5个行业,竟已发不出工资!形势真的很严峻了

细说职场
2026-04-26 16:52:27
重庆武隆区公告:严禁非法穿越重庆武隆白马山市级自然保护区

重庆武隆区公告:严禁非法穿越重庆武隆白马山市级自然保护区

澎湃新闻
2026-07-23 14:22:30
关于中日局势消息,面对日本,中方为何突然亮出这张底牌

关于中日局势消息,面对日本,中方为何突然亮出这张底牌

夜里的海风
2026-07-23 12:48:13
60家公司,偷了别人的“家”

60家公司,偷了别人的“家”

中国新闻周刊
2026-07-23 07:36:13
全国录取分最低的5所985:看第一个我沉默了。看第三个我动心了

全国录取分最低的5所985:看第一个我沉默了。看第三个我动心了

杨老师深圳升学指南
2026-07-17 07:00:11
94岁原中央保健局局长王敏清:50年没感冒,无三高,靠的就是这几招

94岁原中央保健局局长王敏清:50年没感冒,无三高,靠的就是这几招

新浪财经
2026-06-24 02:28:33
人生超速!33岁内马尔还没退役,足坛巨星竟要提前当爷爷?

人生超速!33岁内马尔还没退役,足坛巨星竟要提前当爷爷?

绿茵八卦君
2026-07-23 08:10:03
爆了!41岁库里2年1.367亿续约!?

爆了!41岁库里2年1.367亿续约!?

贵圈真乱
2026-07-23 10:45:41
48小时态度极速反转,日本对华外交出现明显转向!

48小时态度极速反转,日本对华外交出现明显转向!

阿离家居
2026-07-23 08:54:19
3岁中国籍男童在日本横穿马路时被撞身亡,涉事日本司机被逮捕:没有注意到小男孩突然冲到车前

3岁中国籍男童在日本横穿马路时被撞身亡,涉事日本司机被逮捕:没有注意到小男孩突然冲到车前

上观新闻
2026-07-23 05:58:44
侃爷老婆刷新穿搭底线,穿绑绳内衣就出门,全身布料没头顶帽子多

侃爷老婆刷新穿搭底线,穿绑绳内衣就出门,全身布料没头顶帽子多

林轻吟
2026-07-13 22:08:44
1998年昆明双警遇害案,副局长与女警偷情被杀,凶器竟是他的配枪

1998年昆明双警遇害案,副局长与女警偷情被杀,凶器竟是他的配枪

墨策史
2026-07-22 18:48:44
2026-07-23 15:04:49
北青网-北京青年报 incentive-icons
北青网-北京青年报
北青网官方网易号
1164362文章数 855362关注度
往期回顾 全部

科技要闻

梁文锋:DeepSeek不争超级App,只押注AGI

头条要闻

一家三口花2.5万从广州打车3000公里到西藏 司机回应

头条要闻

一家三口花2.5万从广州打车3000公里到西藏 司机回应

体育要闻

勇士24岁的MVP,也是个勒布朗?

娱乐要闻

冉莹颖回应债务还清后是否会离婚

财经要闻

年内港股最大IPO,中际旭创估值重塑?

汽车要闻

动力狂 脾气稳 海豹08有点上头

态度原创

家居
教育
旅游
房产
手机

家居要闻

2026建博会(广州) 公装联探展交流活动

教育要闻

五年级易错题!不让用方程,家长半天讲不明白

旅游要闻

中国考古博物馆迎来暑期参观热潮

房产要闻

狂抢111轮,溢价39%,楼面价刺破9500!海口土拍杀疯了!

手机要闻

REDMI K100全球版曝光:搭载10000mAh电池、2亿像素主摄

无障碍浏览 进入关怀版