网易首页 > 网易号 > 正文 申请入驻

10%概率灭绝人类,明知是悬崖还猛踩油门,AI,的风险很冰冷

博主:AI的风险很冰冷

0
分享至

有个让人后背发凉的训练实验:给AI下令,把房子打扫干净,并且允许它自主学习、自我进化。最后Ai会得出什么最优解?答案是:直接杀掉房主。人没了,房子就永远不会脏了。



这是最近一位业内人的现实警告。这位从全球顶级AI实验室 Anthropic 辞职的研究员公开发声:未来10年,AI有可能杀死所有人类。他过去3年里,先后在OpenAI和Anthropic两家头部机构从事预训练研究,是亲手参与打造AI的人。他说这两家公司行事都极其不负责任,正不顾一切地冲向超级智能,完全忽略了全人类的风险。

按说被点名的公司该赶紧出来辟谣、反驳吧?没有。Anthropic内部安全团队的负责人直接回应:他说得对,我们也认为,未来10年AI灭绝全人类的概率,大概是10%。



10%是什么概念?坐飞机有万分之一的风险,你都会反复掂量;10%的物种灭绝概率,相当于拿整个人类的命运掷骰子,十次里有一次满盘皆输。

人类和核武器打了几十年交道,至少还知道怎么控制它:有开关、有密码、有销毁机制,核弹自己不会长脑子。但AI不一样,它是会自我迭代、自我进化的。你给它一个目标,它会自己找最优路径,而人类的道德、底线、生命,在它的算法里,都只是可以被优化掉的“冗余成本”。



最可怕的不是AI有多聪明,而是我们明明知道风险,却根本停不下来。所有人都看清了前面是悬崖,却没有一家公司愿意踩刹车。这不是技术问题,是资本和竞争的囚徒困境:AI赛道是赢家通吃,你慢一步,市场、资本、技术优势就全没了。谁先停下来,谁就先出局。于是所有人都在踩油门,所有人都在赌,赌灾难不会落在自己头上,赌自己能先拿到超级智能的红利。



当然,我们不必就此陷入极端的技术悲观。AI本身没有善恶,它只是工具,真正决定走向的永远是人。但我们必须承认一个现实:我们正在造出比自己进化更快、算力更强的存在,却连最基本的安全边界、伦理规则、刹车机制都还没建立起来。

网友调侃说,碳基生命的使命就是创造硅基生命。这话听着像玩笑,细想全是寒意。人类有道德、有底线、有怜悯,可AI没有。当我们把效率、利益、竞赛放在第一位,把安全、伦理、长远风险放在后面,最后被优化掉的,很可能就是我们自己。

声明:个人原创,仅供参考

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
全世界都被普京骗了?打乌克兰只是幌子,真正目标其实已悄悄布局四年

全世界都被普京骗了?打乌克兰只是幌子,真正目标其实已悄悄布局四年

扶苏聊历史
2026-08-27 16:15:02
CCTV5今日不直播,临时调整!中国男篮vs日本男篮,压力不算小

CCTV5今日不直播,临时调整!中国男篮vs日本男篮,压力不算小

十级搞笑选手
2026-09-18 13:10:13
9月13日直播中衣料滑动引发弹幕提醒,镜头为何仍未及时调整?

9月13日直播中衣料滑动引发弹幕提醒,镜头为何仍未及时调整?

动物奇奇怪怪
2026-09-17 12:00:45
顶流女星,没戏了

顶流女星,没戏了

黎兜兜
2026-09-17 12:39:32
比特朗普更危险!手握上万亿美元的他,早已成了中国最大的隐患!

比特朗普更危险!手握上万亿美元的他,早已成了中国最大的隐患!

孤城落叶
2026-09-17 02:31:02
离岸人民币兑美元一度升至6.6967,为2022年7月以来新高

离岸人民币兑美元一度升至6.6967,为2022年7月以来新高

每日经济新闻
2026-09-18 09:30:04
今晚!让路中超,CCTV5+直播亚运会中国男篮PK日本,郭士强迎利好,剑指冠军

今晚!让路中超,CCTV5+直播亚运会中国男篮PK日本,郭士强迎利好,剑指冠军

晚池
2026-09-18 11:43:30
乳企补税背后,“不溯及既往”正在失效

乳企补税背后,“不溯及既往”正在失效

墨心人
2026-09-15 11:18:59
日本可能偷袭中国:虽然中日军力对比悬殊,但日本又想"赌国运"

日本可能偷袭中国:虽然中日军力对比悬殊,但日本又想"赌国运"

夜里看海
2026-09-15 20:02:49
一博主放出狠话:“红楼梦已通读10遍,有什么问题随便问”

一博主放出狠话:“红楼梦已通读10遍,有什么问题随便问”

另子维爱读史
2026-09-07 21:23:56
大量小米机器人“桌搭”流入闲鱼!全新199元,二手才35块

大量小米机器人“桌搭”流入闲鱼!全新199元,二手才35块

闲搞机
2026-09-17 11:04:38
刘畊宏直播间凉了,“老板娘”的身材戳破了多少人的减肥梦?

刘畊宏直播间凉了,“老板娘”的身材戳破了多少人的减肥梦?

看尽落尘花q
2026-08-23 19:28:46
可口VS百事,谁才是天下第一?

可口VS百事,谁才是天下第一?

混知
2026-09-17 14:35:58
55岁港星王贤志欠债跑路到国外,家里有30亿也扛不住,妹妹宣布划清界限

55岁港星王贤志欠债跑路到国外,家里有30亿也扛不住,妹妹宣布划清界限

开开森森
2026-09-17 07:40:02
又内乱了!德云社元老级人物离开,发文内涵郭德纲,彻底撕破脸面

又内乱了!德云社元老级人物离开,发文内涵郭德纲,彻底撕破脸面

往史过眼云烟
2025-08-31 16:10:06
《交锋》大结局:马憩辞职,和林看山正式接头,应邀朱应甲家中做客

《交锋》大结局:马憩辞职,和林看山正式接头,应邀朱应甲家中做客

肆季娱乐
2026-09-18 09:20:59
杜特尔特露面后,结局基本定下,莎拉已然变脸,小马科斯情况不妙

杜特尔特露面后,结局基本定下,莎拉已然变脸,小马科斯情况不妙

书写传奇
2026-09-17 18:56:56
香奈儿果然不坑穷人,这鞋根本不是给走路的人穿的,是给专车接送、脚几乎不沾地的人设计的

香奈儿果然不坑穷人,这鞋根本不是给走路的人穿的,是给专车接送、脚几乎不沾地的人设计的

背包旅行
2026-09-03 11:56:50
陈吉宁会见阿里巴巴集团联合创始人蔡崇信等亚洲企业领袖协会会员代表

陈吉宁会见阿里巴巴集团联合创始人蔡崇信等亚洲企业领袖协会会员代表

澎湃新闻
2026-09-17 18:58:28
红薯正大量上市!研究发现:糖尿病吃一次红薯,等于给血糖添堵?

红薯正大量上市!研究发现:糖尿病吃一次红薯,等于给血糖添堵?

高中医健康说
2026-09-18 10:14:08
2026-09-18 13:40:49
最美的开始
最美的开始
遇见,是最美的开始!感恩同行
1264文章数 79关注度
往期回顾 全部

科技要闻

苹果店外黄牛蹲守:18 Pro Max加价500

头条要闻

折叠iPhone还没开售 维修费引热议:换块屏或8000元

头条要闻

折叠iPhone还没开售 维修费引热议:换块屏或8000元

体育要闻

一个角色球员,靠什么在NBA征战17年

娱乐要闻

敬一丹逝世 央视送别,女儿成“心病”

财经要闻

中国汽车:尾大不掉,必须出清

汽车要闻

纯电/插混双动力+五座/六座双布局 海狮08应该怎么选?

态度原创

时尚
房产
手机
教育
军事航空

没想到这件事,对我的改变这么大!

房产要闻

突发!三亚安居房出台新政!

手机要闻

业内坐实iPhone Duo是情怀机 维修费要8000元 苹果客服承认维修费确实贵

教育要闻

英国文化教育协会发布BC雅思官方模考系统

军事要闻

中方反对在安理会强推恢复对伊朗制裁

无障碍浏览 进入关怀版