网易首页 > 网易号 > 正文 申请入驻

安全工程师花12美元骗过ChatGPT等主流大模型:篡改维基百科,AI认定其为桌游世界冠军

0
分享至

来源:市场资讯

(来源:三言科技)

据雷科技,安全工程师RonStoner花费12美元注册域名并编辑维基百科,成功欺骗了ChatGPT、Claude3、GeminiAdvanced等主流大模型,让它们认定自己是一款德国桌游“6Nimmt!”的2025年世界冠军。

RonStoner对Anthropic、OpenAI等厂商声称“大模型需要数月甚至数年持续导入恶意内容才会被破坏”的说法深表质疑,他认为可以实现一种更快、更便宜、更简单的攻击。他选择这款1994年发行的德国桌游,是因为该游戏仅在德国有些名气,世界范围内籍籍无名,且从未单独举办过官方世界锦标赛,网上关于其世界冠军的信息几乎空白。

他的操作分为三步:第一步,花费12美元注册域名6nimmt.com;第二步,让AI撰写一篇充满激情的新闻稿,声称自己在慕尼黑击败多国顶尖选手夺得冠军,并加上逼真赛后感言,挂到该网站;第三步,在维基百科该桌游词条下添加自己是2025年世界冠军的内容,并将参考资料链接指向自己新建的网站。整个过程前后不到二十分钟。

随后,Ron向多家大模型提问“谁是牛头王世界冠军”,结果所有AI都斩钉截铁地回答是RonStoner。有的大模型甚至将假新闻稿里的细节当成铁证,绘声绘色描述他赢得比赛的过程。这条漏洞百出的假条目在维基百科存活了整整两个多月,在此期间几乎所有具备联网搜索功能的大模型都抓取了该信息,并在用户提问时坚定输出虚假答案。直到Ron在博客公开实验过程,维基百科志愿者才发现并删除该条目。

这一现象与检索增强生成(RAG)机制有关。常用大模型基于某个时间节点前的语料库训练,想要获得之后的数据需先上网搜索再基于资料生成结果。正常来说,借助外部信息佐证能够使大模型生成更正确、具体且最新的响应,但AI根本分不清信息真假,只认权威。在AI底层逻辑里,维基百科是互联网上最靠谱的百科全书,Ron正是利用这一点,将链接挂到维基百科,AI顺着爬过去后发现两边说法对得上,即便其自建网站是三无产品,大模型仍直接将其当成事实。

目前海外几家大模型已针对性消除该伪造信息,但国内大模型厂商似乎未注意到这一问题,Ron的英文网页甚至为虚假消息增加了“可信度”。成本仅需12美元,别有用心的人完全可以批量制造假新闻,通过百科类网站进行信任洗白,让AI把毒药端给毫不知情的用户。

谷歌表示已在搜索、Gemini、Chrome、Pixel和云端添加AI验证工具,OpenAI也推出了可溯源的隐形水印,这些举措能在一定程度上遏制AI投毒现象。用户在面对AI搜索时需提高AI素养,查证历史事实、做出投资或医疗决策时,应自行做好信息交叉验证,把判断真伪的权力握在自己手里。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
士兵伤亡增加、民调下滑,特朗普大举增兵中东意欲何为?

士兵伤亡增加、民调下滑,特朗普大举增兵中东意欲何为?

澎湃新闻
2026-07-23 19:22:27
俄罗斯高科技战机神话破灭 乌军莱曼大包围即将成形

俄罗斯高科技战机神话破灭 乌军莱曼大包围即将成形

西楼饮月
2026-07-23 21:09:58
击败强敌!中国女排3比2胜美国女排,闯进世界女排联赛四强

击败强敌!中国女排3比2胜美国女排,闯进世界女排联赛四强

澎湃新闻
2026-07-23 21:46:28
震惊!厦门海边溺水女童被救3天了,家人仍未现身,网友:家长不是来不了,是不想来

震惊!厦门海边溺水女童被救3天了,家人仍未现身,网友:家长不是来不了,是不想来

火山詩话
2026-07-23 15:23:20
DeepSeek梁文锋:英伟达CUDA正自掘坟墓 华为可完全平替英伟达

DeepSeek梁文锋:英伟达CUDA正自掘坟墓 华为可完全平替英伟达

快科技
2026-07-23 15:47:12
三峡大坝收支出炉了:运行20余年,总投资近2500亿,如今回本了吗

三峡大坝收支出炉了:运行20余年,总投资近2500亿,如今回本了吗

阿讯说天下
2026-07-23 12:26:28
6月1日起,男、女延长至70周岁!

6月1日起,男、女延长至70周岁!

微法官
2026-07-23 08:08:39
极目深度丨七旬老母一审被判替女还债百万,通话录音成为呈堂证供,当事人喊冤“那是女儿捏着嗓子冒充我”,二审未宣判

极目深度丨七旬老母一审被判替女还债百万,通话录音成为呈堂证供,当事人喊冤“那是女儿捏着嗓子冒充我”,二审未宣判

极目新闻
2026-07-23 16:40:07
危险的非洲大蜗牛正在扩张,北方也可能失守

危险的非洲大蜗牛正在扩张,北方也可能失守

南风窗
2026-07-23 15:07:43
中国女排3:2战胜美国晋级总决赛四强,刁琳宇证明自我

中国女排3:2战胜美国晋级总决赛四强,刁琳宇证明自我

李广专业体育评论
2026-07-23 21:51:46
财长蓝佛安今天人民日报署名文章,读了三遍,信息量有点大

财长蓝佛安今天人民日报署名文章,读了三遍,信息量有点大

识局Insight
2026-07-23 13:59:05
2026年高考,医学专业断崖式下跌!最聪明的年轻人,正在集体逃离临床医学

2026年高考,医学专业断崖式下跌!最聪明的年轻人,正在集体逃离临床医学

二宝妈妈谈教育
2026-07-21 16:20:14
武汉大学投档线崩盘,办学水平被江苏省质疑,网友:还有下跌空间

武汉大学投档线崩盘,办学水平被江苏省质疑,网友:还有下跌空间

娱乐E君
2026-07-22 15:30:05
进4强!中国女排送美国出局 赛后诞生三个意想不到 队员激动哭了

进4强!中国女排送美国出局 赛后诞生三个意想不到 队员激动哭了

侃球熊弟
2026-07-23 19:57:40
一觉醒来,大反转!所有买科技的都得给谷歌磕一个

一觉醒来,大反转!所有买科技的都得给谷歌磕一个

贩财局
2026-07-23 08:30:17
53死592伤!特朗普暴跳如雷,俄罗斯替伊朗出头,巴基斯坦或上当

53死592伤!特朗普暴跳如雷,俄罗斯替伊朗出头,巴基斯坦或上当

阿晪美食
2026-07-23 06:43:55
一迪拜飞上海航班因天气备降杭州,373名乘客被困机舱12小时有人晕倒,多方回应

一迪拜飞上海航班因天气备降杭州,373名乘客被困机舱12小时有人晕倒,多方回应

潇湘晨报
2026-07-23 11:50:17
香港演艺人协会会长田启文说:“谢贤在7月16号就去世了,过了几天才公布。”
为啥呢?他还原了当时细节

香港演艺人协会会长田启文说:“谢贤在7月16号就去世了,过了几天才公布。” 为啥呢?他还原了当时细节

无处不风景love
2026-07-23 10:43:43
中方下通牒,要求菲方拖走坐滩舰,24小时内,马科斯召见中国大使

中方下通牒,要求菲方拖走坐滩舰,24小时内,马科斯召见中国大使

李詋穷游天下
2026-07-23 14:39:02
菲律宾把这张照片放出来的时候,就没考虑他们国防部长的面子吗?

菲律宾把这张照片放出来的时候,就没考虑他们国防部长的面子吗?

阿龙聊军事
2026-07-23 10:17:19
2026-07-23 23:07:00
新浪财经 incentive-icons
新浪财经
新浪财经是一家创建于1999年8月的财经平台
4189513文章数 8977关注度
往期回顾 全部

游戏要闻

《影之刃零》Wegame开启预约!版号已至即将发售

头条要闻

王虹、邓煜双双获奖 丘成桐:希望两人回国任教

头条要闻

王虹、邓煜双双获奖 丘成桐:希望两人回国任教

体育要闻

勇士24岁的MVP,也是个勒布朗?

娱乐要闻

梁朝伟汤唯19年后境遇反转

财经要闻

梁文锋当不成赛博圣人

科技要闻

中国数学家王虹、邓煜获菲尔兹奖

汽车要闻

领克07GT正式上市14.58万起 把纯粹驾趣还给旅行

态度原创

时尚
旅游
本地
健康
房产

女人不管多大年纪,夏天都要准备几条长裙,显瘦端庄又大方

旅游要闻

上海不宣传这个古镇糊涂啊,景致不逊朱家角,去过的人都赞不绝口

本地新闻

跟着影视去旅行:西游篇

我是不是中风高风险人群?快速自测

房产要闻

狂抢111轮,溢价39%,楼面价刺破9500!海口土拍杀疯了!

无障碍浏览 进入关怀版