网易首页 > 网易号 > 正文 申请入驻

沈向洋解读AI演进五大维度!IDEA研究院发布“万物可抓取”模型

0
分享至

衡宇 发自 深圳
量子位 | 公众号 QbitAI

“机会不只来自技术本身。”

带领IDEA研究院(粤港澳大湾区数字经济研究院)走过第五个年头的沈向洋,新鲜分享了他用来梳理智能演进的五个维度——

  • 算法范式
  • 智能载体
  • 交互范式
  • 计算架构
  • 数据

作为IDEA研究院创院理事长,相比给出一个技术路径路线图,他更希望提出一个识别机会的思考框架,帮助创新者在智能演进中找到技术、产品与商业的切口。

算法范式维度出发,AI算法已经从构筑表达与生成能力的监督学习阶段,演进到引入因果与执行的强化学习阶段。

后面,将继续朝迈向高层认知的自主学习阶段探索。

智能载体维度出发,当下的关注点已从语言和多模态模型,转向世界模型与具身模型。

这个变化反映出智能载体正从抽象符号空间迈向物理空间。

人机交互维度上,沈向洋强调交互创新的重要性。

过去70年,人机交互经历了命令行、图形界面、搜索、推荐到自然交互的多次范式迁移,每一次迁移背后都对应着底层技术浪潮的变化。

“今天的产品开发者必须看懂智能特性带来的交互机会。”他同时提到,自然交互内部也在分层:

被动响应——交互式执行——具备提议能力的主动模式,交互方式从文本扩展到语音、手势乃至未来的脑机接口。

计算架构维度已经出现从通用走向专用、从单一走向多元的趋势。GPU刺激了深度学习的第一波爆发,但能耗与成本也不断攀升。

于是,性能、成本与能效成了大家追逐的新的平衡点,推理、端侧、强化学习等匹配不同应用任务的专用芯片纷纷涌现。

最后关于数据——在模拟世界阶段,数据是静态教材;在探索世界阶段,数据是动态反馈;在归纳世界阶段,数据是验证假设的证据。

从人类数据枯竭到合成数据兴起,再到AI主动探索并获取实验数据,这背后体现出数据从限制模型能力的约束,逐步转变为推动AI主动学习的工具。

综上,不难得出沈向洋的insight:

  • 机会并不仅仅来自技术本身,也来自理解技术如何改变载体、交互、计算与数据的方式,如何重新分布能力、资源与价值。

此外,沈向洋特别提到对未来个体和未来公司的思考。

当个体的能力被AI放大,许多原本需要多环节协作的任务,可以由单个个体端到端完成。

组织的重心,在某些领域中,会从管控变成定义问题、融合个体之间的协作。

他打趣地说道:

  • 我想未来的CEO应该怎么定义呢?
    可能不是Chief Executive Officer,而是Chief Entertaining Officer(首席氛围官)。
还发布了啥?一揽子创新项目

此次大会上,IDEA研究院还宣布了国际先进技术应用推进中心(深圳)与深港高等研究交流中心(SHARE)两个创新平台,以及一系列创新项目。

量子位选取了与具身、AI-Native编程语言等项目与大家分享——

从视觉切入,发布“万物可抓取”DINO-X Grasp模型

2025 IDEA大会上,IDEA研究院计算机视觉与机器人研究中心负责人张磊,首次系统介绍了研究院在具身智能方向的最新成果:

DINO-X Grasp

过去两年,具身智能异军突起,不少团队试图通过VLA(视觉-语言-动作)大模型架构,让机器人像人一样“听得懂人话,看得懂世界,动得起来”。

但这条路线背后的问题很快浮现出来:泛化能力不足

与其从动作建模着手,不如先把“看清楚”这个问题解决得更彻底——这成为了IDEA研究院发力的突破口。

依托IDEA团队过去在开集目标检测和视觉感知的研究积淀,以强泛化的视觉检测模型DINO-X为基础,IDEA研究院发起了DINO-X Grasp项目

这个模型不仅能够精准识别物体、预测抓取点位,还可以结合深度信息,还原物体的三维结构,从而指导机械臂完成稳定、精确的操作。

更重要的是,它不挑设备也不挑场景。

  • 在普通4090显卡上,DINO-X Grasp可以实现10帧/秒的实时推理速度。
  • 可兼容主流的英特尔深度相机与X-ARM机械臂,不依赖昂贵工业设备。
  • 具备开箱即用的适配能力,支持在移动端或端侧设备运行

现场展示的视频中,DINO-X Grasp驱动的机器人灵活应对各种形状各异的物品,从食品包装袋到异形障碍物,一抓一个准。

目前,这套方案已在招商局集团多个子公司应用,覆盖港口集装箱验残、桥梁螺钉检测、夜间车辆识别等多个复杂场景。

此外,DINO-X Grasp已经与美团机器人研究院开展了合作。

张宏波团队MoonBit:中国人写的编程语言有了10万用户

写过ReScript语言的张宏波,现在又带领团队在IDEA研究院开发MoonBit。

沈向洋特别提到,张宏波是他知道的唯一一个写的编程语言全世界有以万为计量单位的人数在用的人。

他所带领的MoonBit团队2022年底才成立,刚好赶上了ChatGPT横空出世。张宏波在台上分享时说:“作为新的编程语言,(赶上这个时间点),可以让我们有机会重新思考在AI时代下怎么做开发者工具。”

MoonBit专门为AI时代设计

它是所有编程语言史上第一个原生提供AI助手的语言,还为语言模型打造了基于语义分析的IDE。

更重要的是,MoonBit的性能表现出色。在数字计算等基准测试中,性能超越Java近10倍;WebAssembly后端代码体积比Rust小30%,是TypeScript和Go的50%。

过去一年半,MoonBit从一门支持多后端的编程语言,逐步演进为完整的全栈工具链(包含专为AI设计的原生工具集),最终构建起集开发者工具链与智能体开发生态于一体的开发者平台。

张宏波透露,MoonBit已经有了商业付费客户,包括北美的云厂商用它来进行服务器开发。”大部分编程语言在前四年、前五年都是默默无闻的,而我们在这么早的阶段就累积了这么多用户。”

目前,MoonBit的用户从去年的2.6万到现在超过了10万。张宏波预计到2026年底会有接近100万用户,“成为首个从中国走出去的有世界影响力的开源平台”。

提前预告一下:

  • 下个月,用MoonBit编程语言开发的、支持使用多种编程语言的智能体平台MoonBit agent SDK将正式开源。

GPU渲染器Smaray:五年磨一剑,打破国外垄断

王嘉平团队的GPU渲染器Smaray是更为直观的IDEA研究院新近成果。

“在电影工业中,一个镜头通常包含几百个G的数据。”王嘉平在演示时介绍,电影工业的渲染和游戏完全不同。游戏要求毫秒级响应,而电影渲染一帧画面可能需要几小时甚至一天。

目前全球电影渲染市场被三家公司垄断:

美国的Arnold占据半壁江山,皮克斯的Renderman和欧洲的V-Ray瓜分剩余市场。

此前,《流浪地球》等国产大片几乎必须使用Arnold渲染。

花了整整5年时间,从基础算法到工业标准集成,IDEA研究院终于推出了Smaray渲染器。

现场演示环节,王嘉平展示了Smaray的实时渲染能力——

原本需要几分钟才能看清的场景图和雄狮形象,Smaray几秒钟就渲染完成,而且可以像玩FPS游戏一样在场景中自由探索。

更让人惊喜的是,Smaray不仅支持英伟达GPU,还支持AMD、国产GPU甚至苹果芯片。

目前,《流浪地球》特效制作方MoreVFX、《哪吒》制作方光线动画等顶级公司已经开始使用Smaray。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
知名网站创始人突发急性心梗,回家路上突然胸背剧痛,送医几分钟后心脏骤停......刚刚,团队发文

知名网站创始人突发急性心梗,回家路上突然胸背剧痛,送医几分钟后心脏骤停......刚刚,团队发文

都市快报橙柿互动
2026-11-19 11:01:52
克宫打算继续将战争持续到冬季,特朗普特使警告这是俄罗斯最后的机会

克宫打算继续将战争持续到冬季,特朗普特使警告这是俄罗斯最后的机会

山河路口
2026-11-19 13:18:45
匈牙利学者吐槽中国车企:连颗螺丝钉都是从中国带来的,都不让欧洲人造,本地只做低端

匈牙利学者吐槽中国车企:连颗螺丝钉都是从中国带来的,都不让欧洲人造,本地只做低端

王新喜
2026-11-19 12:46:46
1992年十四大产生七位常委,三位新面孔格外引人注目,他们后来的人生轨迹各不相同

1992年十四大产生七位常委,三位新面孔格外引人注目,他们后来的人生轨迹各不相同

李昕言温度空间
2026-11-18 20:09:35
APEC晚宴暖心一幕!李在明弯腰举杯和妻子平视碰杯,这一弓身无关外交礼仪

APEC晚宴暖心一幕!李在明弯腰举杯和妻子平视碰杯,这一弓身无关外交礼仪

魔都姐姐杂谈
2026-11-19 09:07:25
我国规上工业发电量出现连续4个月负增长

我国规上工业发电量出现连续4个月负增长

投资者内参
2026-11-18 20:59:16
特朗普进入欢迎晚宴现场,几个动作让人感动,赢得了中国网友尊重

特朗普进入欢迎晚宴现场,几个动作让人感动,赢得了中国网友尊重

读鬼笔记
2026-11-19 17:39:10
莱昂纳多52岁庆生派对曝光,一车的妖娆女模到场,引发争议

莱昂纳多52岁庆生派对曝光,一车的妖娆女模到场,引发争议

译言
2026-11-17 08:31:18
Anthropic发行价定了:83美元 今晚上市 距离全民躺平时代还剩1.3年?

Anthropic发行价定了:83美元 今晚上市 距离全民躺平时代还剩1.3年?

科技金融在线
2026-11-19 09:12:51
腾讯:元宝不及预期,已大幅削减投入;WorkBuddy已是“中国使用量最高的AI产品”,有用户每月花4万买token

腾讯:元宝不及预期,已大幅削减投入;WorkBuddy已是“中国使用量最高的AI产品”,有用户每月花4万买token

大风新闻
2026-11-19 10:40:03
大爷一句话戳中无数人:交了57年公粮,好粮给国家,瘪粒留自己,现在老了每月领一百多

大爷一句话戳中无数人:交了57年公粮,好粮给国家,瘪粒留自己,现在老了每月领一百多

一丝不苟的法律人
2026-11-19 10:51:33
山东大师王兴夫被抓捕归案,99名女徒弟揭露内幕,真相让人意外

山东大师王兴夫被抓捕归案,99名女徒弟揭露内幕,真相让人意外

诡谲怪谈
2025-03-25 17:25:18
王石再次预言楼市!2026年12月之后,中国房价或迎来4大转变

王石再次预言楼市!2026年12月之后,中国房价或迎来4大转变

巢客HOME
2026-11-19 11:00:09
乌克兰队丑闻!25岁球星开炮:足协让我吃禁药,舍甫琴科还假帮忙

乌克兰队丑闻!25岁球星开炮:足协让我吃禁药,舍甫琴科还假帮忙

风过乡
2026-11-19 08:33:37
为什么国家越来越强,我们的日子却越来越紧

为什么国家越来越强,我们的日子却越来越紧

小禾的半糖生活
2026-11-18 13:20:03
一首《慌啥子嘛》把我听吐了......

一首《慌啥子嘛》把我听吐了......

细雨中的呼喊
2026-11-17 18:21:32
ESPN爆料詹姆斯向76人教练组提出要求,遭詹姆斯社媒直接开怼

ESPN爆料詹姆斯向76人教练组提出要求,遭詹姆斯社媒直接开怼

夜白侃球
2026-11-19 19:40:55
马斯克披露多项业务时间表:Optimus拟18个月内胜任家务,Terafab计划2028年底量产

马斯克披露多项业务时间表:Optimus拟18个月内胜任家务,Terafab计划2028年底量产

界面新闻
2026-11-19 15:22:51
《一路向西》的四大美女,同一部电影,不同的人生道路

《一路向西》的四大美女,同一部电影,不同的人生道路

该用户已看透一切
2026-11-16 13:34:38
拉夫罗夫鄙夷一览无余,欧洲人连桌都没上,就对桌上的菜指指点点

拉夫罗夫鄙夷一览无余,欧洲人连桌都没上,就对桌上的菜指指点点

司马平邦
2026-11-19 19:09:37
2026-11-19 20:00:49
量子位 incentive-icons
量子位
追踪人工智能动态
13700文章数 176601关注度
往期回顾 全部

科技要闻

提前三个月加薪!英伟达全员会稳军心

头条要闻

中美元首举行会晤 特朗普:请中国继续保持强大

头条要闻

中美元首举行会晤 特朗普:请中国继续保持强大

体育要闻

文班亚马也防不住这"巨兽" 无奈吐槽:悲哀

娱乐要闻

后会友期 文吉儿公然怼谈话老师陈晓楠

财经要闻

Anthropic的算力赌局

汽车要闻

华境S五座版亮相 标配华为乾崑科技和宁德时代电芯

态度原创

时尚
数码
家居
本地
房产

0.01分赢下保研,第二天就被室友举报了

数码要闻

博帝推出AI Matrix系列DDR5内存、M.2 SSD,专为端侧AI设计

家居要闻

2026建博会(广州) 公装联探展交流活动

本地新闻

乌兰察布:以前种土豆,现在种Token

房产要闻

2.5亿!丁村侨中,新动作来了!

无障碍浏览 进入关怀版