网易首页 > 网易号 > 正文 申请入驻

Transformer之父NoamShazeer离开谷歌加入OpenAI

0
分享至

据字母AI,Google工程副总裁、Gemini模型联合负责人NoamShazeer宣布离开Google,加入OpenAI担任架构研究负责人。OpenAI首席研究官MarkChen确认了这一任命,SamAltman则表示从OpenAI创立之初就想与Shazeer合作,等了十年。

Shazeer是2017年论文《AttentionIsAllYouNeed》的核心作者之一,该论文提出的Transformer架构成为现代大模型的底层基础。此外,他还较早推动了稀疏MoE(混合专家模型)的发展。

Shazeer的职业生涯与Google多次“分分合合”。他于2000年首次加入Google,2009年短暂离开,2012年因被GoogleBrain团队吸引而回归。2017年参与发表Transformer论文后,他于2021年与同事DanielDeFreitas离开Google创办Character.AI,起因是Google拒绝公开发布他们开发的聊天机器人Meena。

2024年,Google通过一笔约27亿美元的技术授权与人才回流交易,将Shazeer及部分Character.AI团队重新请回,使其参与Gemini模型研发。Shazeer因持有Character.AI股份在这笔交易中获得了数亿美元收益。但不到两年后,他再次离开Google,转投OpenAI。

Shazeer的跳槽正值AI行业对Transformer架构局限性的反思期。业界认为,单纯扩大预训练规模的边际收益正在下降,Transformer在长上下文记忆、动态状态追踪和真正推理能力上存在结构性短板。下一代模型需要在架构层面实现突破,更好地维护状态、组织计算和更新对世界的表示。

对Google而言,这不仅是失去一位Gemini联合负责人,更折射出其在将前沿研究快速产品化方面的反复延迟。对OpenAI来说,Shazeer带来的大规模训练、MoE、高效解码等经验,以及从“小实验”走向“大系统”的架构判断能力,将助力其寻找Transformer之后的下一步。

当前,OpenAI面临沉重财务压力。据报道,其2025年支出约340亿美元,净亏损约390亿美元。与此同时,Anthropic等对手也在加紧人才布局,双方几乎同时提交IPO文件。前沿模型竞争正演变为一场围绕架构创新和人才争夺的昂贵战争。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
张德江同志之父张志毅简介:开国少将,被誉为我军炮兵的“鼻祖”

张德江同志之父张志毅简介:开国少将,被誉为我军炮兵的“鼻祖”

明月清风阁
2026-10-06 15:10:12
港股医药股闪崩,存储也大跌,发生了什么?

港股医药股闪崩,存储也大跌,发生了什么?

金石随笔
2026-10-07 11:21:10
普京总统,74岁大寿生日快乐,奉上最新战报以贺!

普京总统,74岁大寿生日快乐,奉上最新战报以贺!

鹰眼Defence
2026-10-07 16:14:06
电诈园区又杀回来了?几十天重建3大园区,幕后大佬竟是妙瓦底王

电诈园区又杀回来了?几十天重建3大园区,幕后大佬竟是妙瓦底王

蹲坑看世界
2026-10-06 12:59:35
苹果首款折叠iPhone Duo双页PDF模式曝光

苹果首款折叠iPhone Duo双页PDF模式曝光

IT之家
2026-10-07 08:20:10
抵达台湾不久,59岁毛人凤随即暴亡,蒋介石:他糊涂,很不懂事!

抵达台湾不久,59岁毛人凤随即暴亡,蒋介石:他糊涂,很不懂事!

史笔似尘钩
2026-01-05 19:59:03
大S 50岁!坟墓现场华丽庆生,具俊晔搂小S引发热议

大S 50岁!坟墓现场华丽庆生,具俊晔搂小S引发热议

娱乐小丸子
2026-10-06 19:50:35
国家发文,官宣李梓萌新身份,离开央视传闻半年前就已水落石出

国家发文,官宣李梓萌新身份,离开央视传闻半年前就已水落石出

历史的烟火
2026-10-07 05:36:13
梅西感人致辞:世界杯之后该说再见了,真希望一辈子为国家队出场

梅西感人致辞:世界杯之后该说再见了,真希望一辈子为国家队出场

奥拜尔
2026-10-07 10:17:32
国庆即将结束,六大爆火旅游城市出炉!成都出人意料,京沪渝上榜

国庆即将结束,六大爆火旅游城市出炉!成都出人意料,京沪渝上榜

体育小柚
2026-10-07 12:03:55
调查发现:起床后喜欢喝杯水的人,用不了多久,身体会有4个改变

调查发现:起床后喜欢喝杯水的人,用不了多久,身体会有4个改变

路医生健康科普
2026-10-07 17:35:50
新疆男大景区失联11天!家属拿百万寻人,当地人曝噩耗,恐已遇害

新疆男大景区失联11天!家属拿百万寻人,当地人曝噩耗,恐已遇害

懒散的雅儿
2026-10-07 14:14:41
汽车燃油耗尽,离加油站仅20多米却加不到油!车主无奈花350元叫拖车,折腾了1个多小时,加油站道歉

汽车燃油耗尽,离加油站仅20多米却加不到油!车主无奈花350元叫拖车,折腾了1个多小时,加油站道歉

大风新闻
2026-10-07 19:29:03
被打一波9-1,梁靖崑1-3爆冷惨败!国乒男单仅2人晋级16强省队3人

被打一波9-1,梁靖崑1-3爆冷惨败!国乒男单仅2人晋级16强省队3人

求球不落谛
2026-10-07 11:44:53
莫言:永远不要期望一个没有血缘关系的人,能真正站在你的角度替你考虑问题——这是成年人最大的清醒

莫言:永远不要期望一个没有血缘关系的人,能真正站在你的角度替你考虑问题——这是成年人最大的清醒

杏花烟雨江南的碧园
2026-09-30 16:15:04
诺奖生理学奖出炉,发明无创检测的中国科学家再遭打压,遗憾落选

诺奖生理学奖出炉,发明无创检测的中国科学家再遭打压,遗憾落选

云景侃记
2026-10-07 11:33:53
奉劝大家,没事少组织家庭聚餐

奉劝大家,没事少组织家庭聚餐

阿凯销售场
2026-10-07 01:05:44
诺奖评委:诺贝尔奖评奖不看顶刊论文

诺奖评委:诺贝尔奖评奖不看顶刊论文

必记本
2026-10-05 20:34:44
跟腱断裂赛季报销!76人官宣胡克波尔蒂将接受手术:可申请伤病特例

跟腱断裂赛季报销!76人官宣胡克波尔蒂将接受手术:可申请伤病特例

罗说NBA
2026-10-07 05:12:51
土耳其的女子确实漂亮,兼具典雅容貌与异域风情

土耳其的女子确实漂亮,兼具典雅容貌与异域风情

娱你同欢
2026-10-07 11:06:22
2026-10-07 20:56:49
三言科技 incentive-icons
三言科技
聚焦新未来新科技,严肃又活泼。
104117文章数 66914关注度
往期回顾 全部

科技要闻

诺贝尔化学奖揭晓,两位科学家摘得大奖

头条要闻

缅北木姐地图上密密麻麻全是电诈窝点 中方跨境"拔钉"

头条要闻

缅北木姐地图上密密麻麻全是电诈窝点 中方跨境"拔钉"

体育要闻

从骑马舞到开口全中文 德约在北京不止七冠

娱乐要闻

蔡康永风波再升级!这次谁也救不了他

财经要闻

谷歌签下科技史上最大核能协议

汽车要闻

智能化再提升 2027款东风标致、东风雪铁龙新车更人性化了

态度原创

房产
旅游
教育
本地
时尚

房产要闻

保利大爆发,冲到榜一!海南楼市前三季度,热销榜出炉!

旅游要闻

[视频]入境游持续升温 外国游客深度体验多彩中国

教育要闻

长假结束孩子又不去上学了,该如何让他把复学坚持下去?

本地新闻

中秋逛白塔寺,体验国医妙荟雅集

刘雯的松弛感卫衣穿搭,太值得借鉴了

无障碍浏览 进入关怀版