网易首页 > 网易号 > 正文 申请入驻

沈向洋解读AI演进五大维度!IDEA研究院发布“万物可抓取”模型

0
分享至

衡宇 发自 深圳
量子位 | 公众号 QbitAI

“机会不只来自技术本身。”

带领IDEA研究院(粤港澳大湾区数字经济研究院)走过第五个年头的沈向洋,新鲜分享了他用来梳理智能演进的五个维度——

  • 算法范式
  • 智能载体
  • 交互范式
  • 计算架构
  • 数据

作为IDEA研究院创院理事长,相比给出一个技术路径路线图,他更希望提出一个识别机会的思考框架,帮助创新者在智能演进中找到技术、产品与商业的切口。

算法范式维度出发,AI算法已经从构筑表达与生成能力的监督学习阶段,演进到引入因果与执行的强化学习阶段。

后面,将继续朝迈向高层认知的自主学习阶段探索。

智能载体维度出发,当下的关注点已从语言和多模态模型,转向世界模型与具身模型。

这个变化反映出智能载体正从抽象符号空间迈向物理空间。

人机交互维度上,沈向洋强调交互创新的重要性。

过去70年,人机交互经历了命令行、图形界面、搜索、推荐到自然交互的多次范式迁移,每一次迁移背后都对应着底层技术浪潮的变化。

“今天的产品开发者必须看懂智能特性带来的交互机会。”他同时提到,自然交互内部也在分层:

被动响应——交互式执行——具备提议能力的主动模式,交互方式从文本扩展到语音、手势乃至未来的脑机接口。

计算架构维度已经出现从通用走向专用、从单一走向多元的趋势。GPU刺激了深度学习的第一波爆发,但能耗与成本也不断攀升。

于是,性能、成本与能效成了大家追逐的新的平衡点,推理、端侧、强化学习等匹配不同应用任务的专用芯片纷纷涌现。

最后关于数据——在模拟世界阶段,数据是静态教材;在探索世界阶段,数据是动态反馈;在归纳世界阶段,数据是验证假设的证据。

从人类数据枯竭到合成数据兴起,再到AI主动探索并获取实验数据,这背后体现出数据从限制模型能力的约束,逐步转变为推动AI主动学习的工具。

综上,不难得出沈向洋的insight:

  • 机会并不仅仅来自技术本身,也来自理解技术如何改变载体、交互、计算与数据的方式,如何重新分布能力、资源与价值。

此外,沈向洋特别提到对未来个体和未来公司的思考。

当个体的能力被AI放大,许多原本需要多环节协作的任务,可以由单个个体端到端完成。

组织的重心,在某些领域中,会从管控变成定义问题、融合个体之间的协作。

他打趣地说道:

  • 我想未来的CEO应该怎么定义呢?
    可能不是Chief Executive Officer,而是Chief Entertaining Officer(首席氛围官)。
还发布了啥?一揽子创新项目

此次大会上,IDEA研究院还宣布了国际先进技术应用推进中心(深圳)与深港高等研究交流中心(SHARE)两个创新平台,以及一系列创新项目。

量子位选取了与具身、AI-Native编程语言等项目与大家分享——

从视觉切入,发布“万物可抓取”DINO-X Grasp模型

2025 IDEA大会上,IDEA研究院计算机视觉与机器人研究中心负责人张磊,首次系统介绍了研究院在具身智能方向的最新成果:

DINO-X Grasp

过去两年,具身智能异军突起,不少团队试图通过VLA(视觉-语言-动作)大模型架构,让机器人像人一样“听得懂人话,看得懂世界,动得起来”。

但这条路线背后的问题很快浮现出来:泛化能力不足

与其从动作建模着手,不如先把“看清楚”这个问题解决得更彻底——这成为了IDEA研究院发力的突破口。

依托IDEA团队过去在开集目标检测和视觉感知的研究积淀,以强泛化的视觉检测模型DINO-X为基础,IDEA研究院发起了DINO-X Grasp项目

这个模型不仅能够精准识别物体、预测抓取点位,还可以结合深度信息,还原物体的三维结构,从而指导机械臂完成稳定、精确的操作。

更重要的是,它不挑设备也不挑场景。

  • 在普通4090显卡上,DINO-X Grasp可以实现10帧/秒的实时推理速度。
  • 可兼容主流的英特尔深度相机与X-ARM机械臂,不依赖昂贵工业设备。
  • 具备开箱即用的适配能力,支持在移动端或端侧设备运行

现场展示的视频中,DINO-X Grasp驱动的机器人灵活应对各种形状各异的物品,从食品包装袋到异形障碍物,一抓一个准。

目前,这套方案已在招商局集团多个子公司应用,覆盖港口集装箱验残、桥梁螺钉检测、夜间车辆识别等多个复杂场景。

此外,DINO-X Grasp已经与美团机器人研究院开展了合作。

张宏波团队MoonBit:中国人写的编程语言有了10万用户

写过ReScript语言的张宏波,现在又带领团队在IDEA研究院开发MoonBit。

沈向洋特别提到,张宏波是他知道的唯一一个写的编程语言全世界有以万为计量单位的人数在用的人。

他所带领的MoonBit团队2022年底才成立,刚好赶上了ChatGPT横空出世。张宏波在台上分享时说:“作为新的编程语言,(赶上这个时间点),可以让我们有机会重新思考在AI时代下怎么做开发者工具。”

MoonBit专门为AI时代设计

它是所有编程语言史上第一个原生提供AI助手的语言,还为语言模型打造了基于语义分析的IDE。

更重要的是,MoonBit的性能表现出色。在数字计算等基准测试中,性能超越Java近10倍;WebAssembly后端代码体积比Rust小30%,是TypeScript和Go的50%。

过去一年半,MoonBit从一门支持多后端的编程语言,逐步演进为完整的全栈工具链(包含专为AI设计的原生工具集),最终构建起集开发者工具链与智能体开发生态于一体的开发者平台。

张宏波透露,MoonBit已经有了商业付费客户,包括北美的云厂商用它来进行服务器开发。”大部分编程语言在前四年、前五年都是默默无闻的,而我们在这么早的阶段就累积了这么多用户。”

目前,MoonBit的用户从去年的2.6万到现在超过了10万。张宏波预计到2026年底会有接近100万用户,“成为首个从中国走出去的有世界影响力的开源平台”。

提前预告一下:

  • 下个月,用MoonBit编程语言开发的、支持使用多种编程语言的智能体平台MoonBit agent SDK将正式开源。

GPU渲染器Smaray:五年磨一剑,打破国外垄断

王嘉平团队的GPU渲染器Smaray是更为直观的IDEA研究院新近成果。

“在电影工业中,一个镜头通常包含几百个G的数据。”王嘉平在演示时介绍,电影工业的渲染和游戏完全不同。游戏要求毫秒级响应,而电影渲染一帧画面可能需要几小时甚至一天。

目前全球电影渲染市场被三家公司垄断:

美国的Arnold占据半壁江山,皮克斯的Renderman和欧洲的V-Ray瓜分剩余市场。

此前,《流浪地球》等国产大片几乎必须使用Arnold渲染。

花了整整5年时间,从基础算法到工业标准集成,IDEA研究院终于推出了Smaray渲染器。

现场演示环节,王嘉平展示了Smaray的实时渲染能力——

原本需要几分钟才能看清的场景图和雄狮形象,Smaray几秒钟就渲染完成,而且可以像玩FPS游戏一样在场景中自由探索。

更让人惊喜的是,Smaray不仅支持英伟达GPU,还支持AMD、国产GPU甚至苹果芯片。

目前,《流浪地球》特效制作方MoreVFX、《哪吒》制作方光线动画等顶级公司已经开始使用Smaray。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
西安昆明同步执法,关停违规餐厅驱逐印度人

西安昆明同步执法,关停违规餐厅驱逐印度人

甜到你心坎
2026-08-09 06:40:57
TikTok主播靠“挨打”涨粉1.3万,观众花1美分就能射他,1000币档位一次挨1888发

TikTok主播靠“挨打”涨粉1.3万,观众花1美分就能射他,1000币档位一次挨1888发

峡谷一级保护废物
2026-08-08 00:10:45
5年前免费铺的雪顶隔热膜,今天广州37℃实测降温20°

5年前免费铺的雪顶隔热膜,今天广州37℃实测降温20°

椰青美食分享
2026-08-10 12:24:57
贾冰饭局被偷拍事件,让人想起了当年的毕福剑

贾冰饭局被偷拍事件,让人想起了当年的毕福剑

清书先生
2026-08-10 15:11:20
彻底摊牌了?一个欠9亿一个骗13.9亿,董卿被爆猛料,原来她和王丽坤同样困境

彻底摊牌了?一个欠9亿一个骗13.9亿,董卿被爆猛料,原来她和王丽坤同样困境

她时尚丫
2026-08-07 18:55:34
70岁以后,能拿到这个数的退休金,你就很优秀了

70岁以后,能拿到这个数的退休金,你就很优秀了

小影的娱乐
2026-07-25 08:52:36
2027款丰田凯美瑞到店,升级8.8英寸全液晶仪表+15.6英寸中控屏

2027款丰田凯美瑞到店,升级8.8英寸全液晶仪表+15.6英寸中控屏

闻车品百魅
2026-08-10 11:46:55
下面好疼,放过我!儿媳被公公侵犯6年,儿子撞破奸情怒杀父亲

下面好疼,放过我!儿媳被公公侵犯6年,儿子撞破奸情怒杀父亲

易玄
2026-08-09 10:55:11
云南女孩差1分落榜国防科大,拒北大10万奖学金,复读693分圆梦

云南女孩差1分落榜国防科大,拒北大10万奖学金,复读693分圆梦

糖逗在娱乐
2026-08-08 15:12:51
为了把竹知了说成日本玩具,他把自己说进了坑里,被网友举报台独

为了把竹知了说成日本玩具,他把自己说进了坑里,被网友举报台独

历史总在押韵
2026-08-09 18:48:10
她去日本医院切脑子里的瘤,结果瘤没动,医生把脑干切了?!

她去日本医院切脑子里的瘤,结果瘤没动,医生把脑干切了?!

英国那些事儿
2026-08-09 23:23:10
30名洪都拉斯学生获中国政府奖学金赴华留学

30名洪都拉斯学生获中国政府奖学金赴华留学

新华社
2026-08-07 15:19:17
贾冰的“醉话”,照出了人性最深的恶

贾冰的“醉话”,照出了人性最深的恶

迷世书童
2026-08-10 10:04:18
1948 年黄百韬部被围,五位军长死守不降,激战方知非嫡系最顽强

1948 年黄百韬部被围,五位军长死守不降,激战方知非嫡系最顽强

磊子讲史
2026-06-26 13:53:56
终于有经济学家批评体制内退休金太高、加剧代际矛盾,评论区炸锅

终于有经济学家批评体制内退休金太高、加剧代际矛盾,评论区炸锅

慧翔百科
2026-06-23 08:47:02
被打出原形!伊朗越境斩首,美军拆光爱国者跑路,库尔德彻底被卖

被打出原形!伊朗越境斩首,美军拆光爱国者跑路,库尔德彻底被卖

铁锤侃侃而谈
2026-08-10 11:54:29
“彻查郑秉文”全网刷屏!养老争议背后,藏着普通人的心声

“彻查郑秉文”全网刷屏!养老争议背后,藏着普通人的心声

三农老历
2026-08-10 08:18:04
穆帅谈队医门:女医生和男医生没区别,我不高兴时言语会过激

穆帅谈队医门:女医生和男医生没区别,我不高兴时言语会过激

懂球帝
2026-08-10 10:23:32
苦等6年!《异兽魔都》第二季尺度全开,MAPPA导演:第一季因电视限制删减太多

苦等6年!《异兽魔都》第二季尺度全开,MAPPA导演:第一季因电视限制删减太多

赴一场山海啊
2026-08-09 01:21:07
丈夫再发声,滴水不漏,但他没料到,朱女士还有张不为人知的底牌

丈夫再发声,滴水不漏,但他没料到,朱女士还有张不为人知的底牌

大鱼简科
2026-08-09 16:39:39
2026-08-10 15:59:00
量子位 incentive-icons
量子位
追踪人工智能动态
13116文章数 176532关注度
往期回顾 全部

科技要闻

马斯克又放大招:星链要吃掉全球一半流量

头条要闻

台风"白海豚"登陆上海 网友打车4公里网约车叫价108元

头条要闻

台风"白海豚"登陆上海 网友打车4公里网约车叫价108元

体育要闻

阿森纳的39号球衣,有了最适合的主人

娱乐要闻

演员秦焰去世 享年72岁

财经要闻

宇树科技今日申购,中一签能赚多少?

汽车要闻

实打实的体量感 家越07能否成为20万内家用SUV新爆款?

态度原创

艺术
数码
家居
时尚
公开课

艺术要闻

崔小冬油画作品集 21幅

数码要闻

LG展示新一代无线壁纸电视Signature OLED W,整机仅厚0.9厘米

家居要闻

2026建博会(广州) 公装联探展交流活动

入秋一定要拥有的衣服:针织背心,太好看了

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版