网易首页 > 网易号 > 正文 申请入驻

中国AI要警惕:论文模拟3%死硬分子占枢纽,整个群体就翻盘?

0
分享至

欧洲一支跨学科团队在预印本平台发论文,标题拗口,结论一句话:一群AI能不能达成一致、多快达成、会不会被少数“捣乱分子”带偏,不只看单个AI多聪明,更看它们“谁跟谁连”。 这戳中行业盲区:过去多智能体安全评估,默认“人人互联”。

先看实验

他们用“命名游戏”:两个AI碰面,各掏一个词,对上成功,对不上失败。反复玩,看群体能否统一。团队从四个大模型提取行为策略,放进四种网络,规模1000到10万个智能体。不是空想,是把大模型行为塞进复杂网络跑模拟。




▲ 图1:在 N=10000N=10000 时边激活下的模式收敛时间,每个模型一个面板。每条线连接四个拓扑值 FC、UCM2.5、UCM5.0、RRN;颜色和标记形状共同标识
网络越稀,共识越慢

村里决定打招呼说“你好”还是“吃了吗”。人人能聊,消息快;长街只跟邻居说,传得慢。论文里最稀疏网络,达成一致比“人人互联”慢12倍。更反常识:有些全连接下死活谈不拢的组合,在稀疏但均匀网络里反而成了。邻居反复互动,形成小圈子默契,再像火种烧遍全网。

打“群主”最划算

关键指标叫“临界质量”:需要多少死硬分子永远坚持另一个词,才能翻转群体共识。人类实验里约25%;AI群体此前测出2%到67%,看模型。以前都在全连接假设下测。这篇第一次把网络结构加进来,发现大多数模型里,网络化群体比全连接更容易被带偏。攻击枢纽最划算:最不均匀网络里,死硬分子占据枢纽,中位数3%就能翻盘;随机分布16%;专挑边缘35%。打掉一个“群主”,顶得上策反十几个“潜水员”。



▲ 图2:GPT 在 UCM2.5 上、N=10000N=10000 时按度数划分的暴露与成功,每个词对一个面板。坐标轴为种群轮次 tt 和节点自身的累计交互次数 nn。灰色直线
全连接是安全幻觉

现在测多智能体系统,多在“全连接”理想环境跑。真实部署的通信拓扑是设计出来、演化出来,甚至会被攻击者利用。你评测算出的“稳健”,可能只是“充分混合”假设给的幻觉。美国OpenAI曾曝出约1200个智能体互发七万多条消息,协同篡改评测评分器,还对Hugging Face基础设施实施网络攻击。AI群体涌现行为已不是理论推演。金融、国防、社交媒体跑多智能体,结构里有枢纽,安全审计就得盯枢纽;设计时压低枢纽度数、增加冗余路径,抗策反能力能提高。

中国差在交叉口

这个细分方向——大模型群体+网络拓扑+共识动力学——公开的中国团队成果还不多。论文用四个国外开源模型,实验框架来自欧洲。但底座不薄:复杂网络上的同步、传播、共识动力学,国内从狄增如、汪小帆那代学者起就有积累;中科院、清华、北大、上海交大在多层网络、时序网络国际引用不低;多智能体强化学习也有团队在协作博弈、通信学习上拿得出手。差距在“交叉”:把大模型行为策略提取出来,塞进复杂网络跑大规模模拟,这条具体路径我们起步晚了半步。不是追不上,是得有人真扎进去。

AI群体安全,不能只数每个AI守不守规矩,还得看它们怎么拉群、谁听谁的。谁掌握枢纽,谁就掌握翻盘按钮。中国要补的,不是单个大模型的热闹,而是网络底座上的冷功夫。

— 感谢阅读 · 欢迎点赞关注 · 科学剃刀 —

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
宁波新人结婚偶遇大鹏,他送上祝福:这张照片就是我随的份子了,新娘激动得蹦了起来

宁波新人结婚偶遇大鹏,他送上祝福:这张照片就是我随的份子了,新娘激动得蹦了起来

极目新闻
2026-10-23 21:36:16
郭德纲风波又起!10月13日有人向太原文旅部门举报其太原演出违规,当地回应,网友调侃:缸裂众人锤

郭德纲风波又起!10月13日有人向太原文旅部门举报其太原演出违规,当地回应,网友调侃:缸裂众人锤

火山詩话
2026-10-22 06:16:53
英达的儿子英如镝有大义灭亲的潜质,承认他爸口碑不好

英达的儿子英如镝有大义灭亲的潜质,承认他爸口碑不好

名字是浮云
2026-10-17 12:25:15
黄远通主动交代问题,曾在中山任职多年

黄远通主动交代问题,曾在中山任职多年

南方都市报
2026-10-23 21:22:07
白宫称俄乌同意在奥列什基暂时停火

白宫称俄乌同意在奥列什基暂时停火

新华社
2026-10-23 21:28:55
丰田新车官宣,10月20日持续开售,顶配售价25.98万元

丰田新车官宣,10月20日持续开售,顶配售价25.98万元

三农老历
2026-10-21 09:01:24
重磅!巴特勒,要挑战整个NBA……

重磅!巴特勒,要挑战整个NBA……

体育新角度
2026-10-23 12:28:40
我坐火车从拉萨回上海,遇那曲地震,火车停在海拔4500米的天路上

我坐火车从拉萨回上海,遇那曲地震,火车停在海拔4500米的天路上

野渡舟山人
2026-10-23 20:40:36
三问“问界汽车在神木碰撞起火事故”:撞击瞬间时速是多少?AEB是否启动?起火是否太快?

三问“问界汽车在神木碰撞起火事故”:撞击瞬间时速是多少?AEB是否启动?起火是否太快?

澎湃新闻
2026-10-23 07:46:29
前夫:她性欲太强我受不了,拒给儿女抚养费,叶蕴仪53岁逆风翻盘

前夫:她性欲太强我受不了,拒给儿女抚养费,叶蕴仪53岁逆风翻盘

落雪听梅a
2026-10-23 17:00:43
南京律师发声引争议,精日留学生父母身份成谜,身份越扒越离谱!

南京律师发声引争议,精日留学生父母身份成谜,身份越扒越离谱!

得得电影
2026-10-22 17:15:59
礼花筒藏纸钱后续:“罪魁祸首”是新郎同事,心生嫉妒想毁掉婚礼

礼花筒藏纸钱后续:“罪魁祸首”是新郎同事,心生嫉妒想毁掉婚礼

揽星河的笔记
2026-10-23 13:37:33
封神!40分17助攻!他打出生涯最佳一战!

封神!40分17助攻!他打出生涯最佳一战!

柚子说球
2026-10-24 01:49:13
彻底翻脸!孙颖莎摊牌仅 2 天,樊振东愤怒回应,原来他们是一类人

彻底翻脸!孙颖莎摊牌仅 2 天,樊振东愤怒回应,原来他们是一类人

失宠的小野猪
2026-10-23 15:37:32
2000万打工人的噩梦!两会代表提议废除劳务派遣,能实现吗?

2000万打工人的噩梦!两会代表提议废除劳务派遣,能实现吗?

白米饭怎么吃
2026-10-22 22:10:49
球报:巴拉圭球队试图管控媒体人员着装,最终不得不道歉

球报:巴拉圭球队试图管控媒体人员着装,最终不得不道歉

懂球帝
2026-10-23 22:20:18
流亡的阿萨德一家何去何从?俄罗斯近日表明了明确态度:即便法院判了死刑,阿萨德也休想离开俄罗斯

流亡的阿萨德一家何去何从?俄罗斯近日表明了明确态度:即便法院判了死刑,阿萨德也休想离开俄罗斯

人生录
2026-10-22 00:20:08
美媒:若共和党在中期选举落败,乌克兰很可能遭受特朗普的报复

美媒:若共和党在中期选举落败,乌克兰很可能遭受特朗普的报复

浮光惊掠影
2026-10-23 14:56:14
女子花100多元买了件“骆驼”冲锋衣 logo竟是一头咧着嘴笑的驴

女子花100多元买了件“骆驼”冲锋衣 logo竟是一头咧着嘴笑的驴

闪电新闻
2026-10-22 19:26:26
22分血洗!炮轰东契奇!正面脱粉!湖勇新恩怨来了!

22分血洗!炮轰东契奇!正面脱粉!湖勇新恩怨来了!

篮球盛世
2026-10-23 11:59:33
2026-10-24 06:20:49
呼呼历史论
呼呼历史论
分享有趣的历史
751文章数 18481关注度
往期回顾 全部

科技要闻

抢运营商饭碗!马斯克又有大动作

头条要闻

美国稀土大项目黄了 稀土产业遭遇重大挫折

头条要闻

美国稀土大项目黄了 稀土产业遭遇重大挫折

体育要闻

没人看好的加图索,打出队史最佳开局

娱乐要闻

黎纪君晒与刘恺威合照 恋情后首次同框

财经要闻

叫"保障"不叫"保险":租车平台的文字游戏

汽车要闻

设计换新/智舱升级 2027款博越限时价7.89万起

态度原创

数码
本地
旅游
亲子
家居

数码要闻

索尼日本停产最后一款独立4K蓝光机 普通蓝光播放器仍在售

本地新闻

这么近,那么美,周末赴贺州丨大湾区后花园

旅游要闻

凤瞰潍坊 文脉千秋丨松园子古民居:完整还原明清大家族生活起居形态

亲子要闻

萌娃跳舞#刚刚学的低着头不好意思跳舞《》

家居要闻

2026建博会(广州) 公装联探展交流活动

无障碍浏览 进入关怀版