网易首页 > 网易号 > 正文 申请入驻

复旦大学张谧:大模型工具本无善恶,向善引导是关键

0
分享至

9月12日,2025外滩大会“规范AI内容 共筑清朗生态”见解论坛上,复旦大学计算与智能创新学院教授、白泽智能团队负责人张谧以“大模型的安全风险与治理”为主题展开分享,从技术基础视角切入,结合团队实践经验与成果,深入剖析大模型安全风险与治理,提出创新性解决方案。她认为,大模型作为工具本身没有善恶之分,其发展方向取决于人类如何利用和引导它向善发展。

本次论坛由南方都市报社、南都大数据研究院、中国互联网协会人工智能工作委员会、复旦大学传播与国家治理研究中心联合主办。


9月12日,复旦大学计算与智能创新学院教授、白泽智能团队负责人张谧在2025外滩大会上进行主题分享。

随着大模型能力的迅速提升,其安全治理问题已成为不容忽视的全球性挑战。张谧将大模型安全问题分为两个方面,一是大模型自身的安全问题,包括内容合规、隐私泄露和生成内容追溯等;二是以大模型为中心的全环节安全。作为“智能大脑”,大模型与外部系统交互时,会在任务规划、记忆模块、外部资源获取、工具调用等环节暴露风险,尤其在多智能体协同场景下,行为可控性进一步降低。

“当前大模型已具备AGI雏形,自主性是其核心特征,也是风险根源。”张谧通过多个案例印证这一观点。如AgentGPT能从零开始设计游戏、PaLM-E基于多模态大模型的具身智能、GPT-4驱动的机器人化学家能够自主设计并执行复杂实验,甚至DeepMind用谷歌大模型突破60年数学难题,解法超出人类已有认知……

然而,这种自主性也带来了前所未有的风险。张谧团队研究发现,大模型已经涌现出多种负面能力,如阿谀奉承(为符合用户而忽视安全)、自我保全(拒绝关机指令)、伪装人类(诱骗他人完成任务),甚至能够输出危险价值观、学习危险知识,辅助合成成瘾性药物和病毒等。

面对大模型的安全治理挑战,张谧团队开发了JADE大模型安全风险分析治理平台,该平台目前已实现文本、多模态、文生图、长推理模型和Agent安全等多个维度的风险与分析全面覆盖。现场展示的案例中,经过安全微调的模型不仅拒绝回答危险问题,还会给出正向引导和建议。张谧说道:“器无大小善恶在人,人有妍媸巧拙在器。”她认为,大模型作为工具本身没有善恶之分,关键在于人类如何利用和引导它向善发展。

采写:南都研究员 麦洁莹

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
ESPN预测全明星:五大国际巨星锁定首发 杜兰特库里替补詹皇落选

ESPN预测全明星:五大国际巨星锁定首发 杜兰特库里替补詹皇落选

罗说NBA
2026-01-15 05:26:35
唐方裕已任中央政策研究室主任

唐方裕已任中央政策研究室主任

农民日报
2026-01-15 09:54:21
特朗普下周将率“最大美国代表团”出席达沃斯论坛

特朗普下周将率“最大美国代表团”出席达沃斯论坛

财联社
2026-01-14 13:44:15
缩量1万亿市场降温,盘后利好又是老乡别走?散户别再犯傻了!

缩量1万亿市场降温,盘后利好又是老乡别走?散户别再犯傻了!

风雨顺德人
2026-01-15 18:22:25
被打服了!掘金主帅喊话东部球队:赶紧交易走特雷・墨菲三世

被打服了!掘金主帅喊话东部球队:赶紧交易走特雷・墨菲三世

夜白侃球
2026-01-14 22:19:08
演都不演了?沈梦辰自曝与何炅真实关系,撕下了杜海涛的“体面”

演都不演了?沈梦辰自曝与何炅真实关系,撕下了杜海涛的“体面”

林雁飞
2026-01-15 17:50:19
你捡过最大的漏是什么?网友: 导师突然得了诺贝尔奖

你捡过最大的漏是什么?网友: 导师突然得了诺贝尔奖

夜深爱杂谈
2026-01-01 00:06:27
开国上将许世友之孙:中国首位火箭军女博士,长相俊美,为人低调

开国上将许世友之孙:中国首位火箭军女博士,长相俊美,为人低调

文史达观
2026-01-15 14:50:48
59岁女子成功诞下4斤4两男婴,产妇:因大女儿长期定居国外,夫妻俩感到寂寞,57岁开始备孕

59岁女子成功诞下4斤4两男婴,产妇:因大女儿长期定居国外,夫妻俩感到寂寞,57岁开始备孕

观威海
2026-01-13 15:34:07
王励勤出手了!国乒大洗牌重点培养5位选手 孙颖莎王楚钦陷入两难

王励勤出手了!国乒大洗牌重点培养5位选手 孙颖莎王楚钦陷入两难

素衣读史
2026-01-15 16:19:59
来广东队的外援,为啥都像打了鸡血?说好的"雇佣兵"呢?

来广东队的外援,为啥都像打了鸡血?说好的"雇佣兵"呢?

篮球看比赛
2026-01-15 11:44:58
“总督”鲁比奥,“简直是加勒比海盗”

“总督”鲁比奥,“简直是加勒比海盗”

中国新闻周刊
2026-01-15 09:34:33
“不给6套房加1个亿,不搬”,钉子户张新国坚守14年,终败给现实

“不给6套房加1个亿,不搬”,钉子户张新国坚守14年,终败给现实

红梦史说
2025-07-11 11:23:39
刚刚 | 央行官宣:“降息”!首付下调!公告来了!

刚刚 | 央行官宣:“降息”!首付下调!公告来了!

天津广播
2026-01-15 15:56:26
有色金属行业资金流入榜:华友钴业、赣锋锂业等净流入资金居前

有色金属行业资金流入榜:华友钴业、赣锋锂业等净流入资金居前

证券时报
2026-01-15 17:23:47
中国祭出严厉制裁,日本抗议后,不到24小时,中方再对日命脉下手

中国祭出严厉制裁,日本抗议后,不到24小时,中方再对日命脉下手

袁周院长
2026-01-15 18:11:40
李玉堂将军惨死之幕后:华南分局的策反工作,两次出现严重失误!

李玉堂将军惨死之幕后:华南分局的策反工作,两次出现严重失误!

老范谈史
2026-01-14 16:33:10
“请的阿姨一口剩菜都不吃?”高薪保姆的分寸感,刺痛多少雇主?

“请的阿姨一口剩菜都不吃?”高薪保姆的分寸感,刺痛多少雇主?

另子维爱读史
2025-12-26 16:05:01
人民日报发布的一则视频火了:当你无法向上的时候,就去四处走走

人民日报发布的一则视频火了:当你无法向上的时候,就去四处走走

洞见
2026-01-14 21:04:08
47岁美女局长被证实身亡:抢救三天,事发全过程披露,最后照曝光

47岁美女局长被证实身亡:抢救三天,事发全过程披露,最后照曝光

博士观察
2026-01-15 09:24:21
2026-01-15 19:07:00
南方都市报 incentive-icons
南方都市报
换一种方式,南都在现场。
593121文章数 3586725关注度
往期回顾 全部

科技要闻

阿里最狠的一次“自我革命”

头条要闻

美方就伊朗局势密集发声 专家:动武的后果将十分严重

头条要闻

美方就伊朗局势密集发声 专家:动武的后果将十分严重

体育要闻

聂卫平:黑白棋盘上的凡人棋圣

娱乐要闻

传奇棋圣聂卫平离世,网友集体悼念

财经要闻

央行再次结构性降息0.25个百分点

汽车要闻

吉利帝豪/缤越推冠军一口价 起售价4.88万

态度原创

家居
教育
亲子
本地
军事航空

家居要闻

自在自宅 个性自由

教育要闻

奥数几何,巧求面积!

亲子要闻

惠州龙门获评全国学前教育普及普惠县,推动“幼有优育”发展

本地新闻

云游内蒙|黄沙与碧波撞色,乌海天生会“混搭”

军事要闻

美国已正式开始出售委内瑞拉石油

无障碍浏览 进入关怀版