网易首页 > 网易号 > 正文 申请入驻

沈向洋解读AI演进五大维度!IDEA研究院发布“万物可抓取”模型

0
分享至

来源:市场资讯

(来源:量子位)

“机会不只来自技术本身。”

带领IDEA研究院(粤港澳大湾区数字经济研究院)走过第五个年头的沈向洋,新鲜分享了他用来梳理智能演进的五个维度——

作为IDEA研究院创院理事长,相比给出一个技术路径路线图,他更希望提出一个识别机会的思考框架,帮助创新者在智能演进中找到技术、产品与商业的切口。


算法范式维度出发,AI算法已经从构筑表达与生成能力的监督学习阶段,演进到引入因果与执行的强化学习阶段。

后面,将继续朝迈向高层认知的自主学习阶段探索。


智能载体维度出发,当下的关注点已从语言和多模态模型,转向世界模型与具身模型。

这个变化反映出智能载体正从抽象符号空间迈向物理空间。


人机交互维度上,沈向洋强调交互创新的重要性。

过去70年,人机交互经历了命令行、图形界面、搜索、推荐到自然交互的多次范式迁移,每一次迁移背后都对应着底层技术浪潮的变化。

“今天的产品开发者必须看懂智能特性带来的交互机会。”他同时提到,自然交互内部也在分层:

被动响应——交互式执行——具备提议能力的主动模式,交互方式从文本扩展到语音、手势乃至未来的脑机接口。


计算架构维度已经出现从通用走向专用、从单一走向多元的趋势。GPU刺激了深度学习的第一波爆发,但能耗与成本也不断攀升。

于是,性能、成本与能效成了大家追逐的新的平衡点,推理、端侧、强化学习等匹配不同应用任务的专用芯片纷纷涌现。


最后关于数据——在模拟世界阶段,数据是静态教材;在探索世界阶段,数据是动态反馈;在归纳世界阶段,数据是验证假设的证据。

从人类数据枯竭到合成数据兴起,再到AI主动探索并获取实验数据,这背后体现出数据从限制模型能力的约束,逐步转变为推动AI主动学习的工具。


综上,不难得出沈向洋的insight:

此外,沈向洋特别提到对未来个体和未来公司的思考。

当个体的能力被AI放大,许多原本需要多环节协作的任务,可以由单个个体端到端完成。

组织的重心,在某些领域中,会从管控变成定义问题、融合个体之间的协作。

他打趣地说道:

此次大会上,IDEA研究院还宣布了国际先进技术应用推进中心(深圳)与深港高等研究交流中心(SHARE)两个创新平台,以及一系列创新项目。

量子位选取了与具身、AI-Native编程语言等项目与大家分享——

2025 IDEA大会上,IDEA研究院计算机视觉与机器人研究中心负责人张磊,首次系统介绍了研究院在具身智能方向的最新成果:

DINO-X Grasp

过去两年,具身智能异军突起,不少团队试图通过VLA(视觉-语言-动作)大模型架构,让机器人像人一样“听得懂人话,看得懂世界,动得起来”。

但这条路线背后的问题很快浮现出来:泛化能力不足


与其从动作建模着手,不如先把“看清楚”这个问题解决得更彻底——这成为了IDEA研究院发力的突破口。

依托IDEA团队过去在开集目标检测和视觉感知的研究积淀,以强泛化的视觉检测模型DINO-X为基础,IDEA研究院发起了DINO-X Grasp项目

这个模型不仅能够精准识别物体、预测抓取点位,还可以结合深度信息,还原物体的三维结构,从而指导机械臂完成稳定、精确的操作。


更重要的是,它不挑设备也不挑场景。

现场展示的视频中,DINO-X Grasp驱动的机器人灵活应对各种形状各异的物品,从食品包装袋到异形障碍物,一抓一个准。

目前,这套方案已在招商局集团多个子公司应用,覆盖港口集装箱验残、桥梁螺钉检测、夜间车辆识别等多个复杂场景。

此外,DINO-X Grasp已经与美团机器人研究院开展了合作。

写过ReScript语言的张宏波,现在又带领团队在IDEA研究院开发MoonBit。

沈向洋特别提到,张宏波是他知道的唯一一个写的编程语言全世界有以万为计量单位的人数在用的人。

他所带领的MoonBit团队2022年底才成立,刚好赶上了ChatGPT横空出世。张宏波在台上分享时说:“作为新的编程语言,(赶上这个时间点),可以让我们有机会重新思考在AI时代下怎么做开发者工具。”

MoonBit专门为AI时代设计

它是所有编程语言史上第一个原生提供AI助手的语言,还为语言模型打造了基于语义分析的IDE。

更重要的是,MoonBit的性能表现出色。在数字计算等基准测试中,性能超越Java近10倍;WebAssembly后端代码体积比Rust小30%,是TypeScript和Go的50%。


过去一年半,MoonBit从一门支持多后端的编程语言,逐步演进为完整的全栈工具链(包含专为AI设计的原生工具集),最终构建起集开发者工具链与智能体开发生态于一体的开发者平台。

张宏波透露,MoonBit已经有了商业付费客户,包括北美的云厂商用它来进行服务器开发。”大部分编程语言在前四年、前五年都是默默无闻的,而我们在这么早的阶段就累积了这么多用户。”

目前,MoonBit的用户从去年的2.6万到现在超过了10万。张宏波预计到2026年底会有接近100万用户,“成为首个从中国走出去的有世界影响力的开源平台”。

提前预告一下:


王嘉平团队的GPU渲染器Smaray是更为直观的IDEA研究院新近成果。

“在电影工业中,一个镜头通常包含几百个G的数据。”王嘉平在演示时介绍,电影工业的渲染和游戏完全不同。游戏要求毫秒级响应,而电影渲染一帧画面可能需要几小时甚至一天。

目前全球电影渲染市场被三家公司垄断:

美国的Arnold占据半壁江山,皮克斯的Renderman和欧洲的V-Ray瓜分剩余市场。

此前,《流浪地球》等国产大片几乎必须使用Arnold渲染。


花了整整5年时间,从基础算法到工业标准集成,IDEA研究院终于推出了Smaray渲染器。

现场演示环节,王嘉平展示了Smaray的实时渲染能力——

原本需要几分钟才能看清的场景图和雄狮形象,Smaray几秒钟就渲染完成,而且可以像玩FPS游戏一样在场景中自由探索。

更让人惊喜的是,Smaray不仅支持英伟达GPU,还支持AMD、国产GPU甚至苹果芯片。

目前,《流浪地球》特效制作方MoreVFX、《哪吒》制作方光线动画等顶级公司已经开始使用Smaray。


特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
高铁车厢二氧化碳超标一倍,12306岂能只让乘客“自行吸氧”

高铁车厢二氧化碳超标一倍,12306岂能只让乘客“自行吸氧”

极目新闻
2026-01-23 13:51:26
商业航天带火太空光伏,15家核心企业,谁值得长期关注?

商业航天带火太空光伏,15家核心企业,谁值得长期关注?

小陆搞笑日常
2026-01-24 11:15:04
捡走吃掉赔8000元!2023年捡到一只回家煲汤,被人发现时只剩骨头

捡走吃掉赔8000元!2023年捡到一只回家煲汤,被人发现时只剩骨头

万象硬核本尊
2026-01-22 19:47:55
高端家居第一股,出事了

高端家居第一股,出事了

融资中国
2026-01-24 11:15:32
公公催我去银行签字,我:签什么?丈夫:我表哥要你做共同还款人

公公催我去银行签字,我:签什么?丈夫:我表哥要你做共同还款人

朝暮书屋
2026-01-21 17:07:25
仗打了一千多天后,美国才后知后觉发现不对劲:中国三年前的抉择竟早已是正确答案!

仗打了一千多天后,美国才后知后觉发现不对劲:中国三年前的抉择竟早已是正确答案!

源溯历史
2026-01-13 23:29:12
刘亦菲现身哈尔滨,带火了“东北姨太风”:上半身打麻将,下半身跳芭蕾,美到落泪!

刘亦菲现身哈尔滨,带火了“东北姨太风”:上半身打麻将,下半身跳芭蕾,美到落泪!

黎兜兜
2026-01-24 21:21:05
巴西宣布对华免签,中国护照迎来黄金时代

巴西宣布对华免签,中国护照迎来黄金时代

凤眼论
2026-01-24 08:47:23
李亚鹏直播再谈嫣然医院关停风波:我那么多地方做得不成功一定有它的道理,没想到迎来转机;当晚直播间销售总额或超7500万

李亚鹏直播再谈嫣然医院关停风波:我那么多地方做得不成功一定有它的道理,没想到迎来转机;当晚直播间销售总额或超7500万

大象新闻
2026-01-24 13:45:08
代旭掀桌,并不彻底,这几位才是真正的狠角色!

代旭掀桌,并不彻底,这几位才是真正的狠角色!

秋枫凋零
2026-01-24 19:44:17
iPhone Air大降2500元,苹果一个月内多次促销

iPhone Air大降2500元,苹果一个月内多次促销

财联社
2026-01-24 21:18:05
台岛表决结果出炉,55:48!柯建铭表态连任,吴思瑶美梦破碎

台岛表决结果出炉,55:48!柯建铭表态连任,吴思瑶美梦破碎

阿器谈史
2026-01-24 09:16:03
北约历史性一幕发生,77年来首次,德国总理决定:马上带人去中国

北约历史性一幕发生,77年来首次,德国总理决定:马上带人去中国

议纪史
2026-01-23 16:10:07
何卓佳决赛输了!0比4大比分失利,决赛被队友石洵瑶横扫!

何卓佳决赛输了!0比4大比分失利,决赛被队友石洵瑶横扫!

眼界纵横
2026-01-24 21:05:45
A股:下周稳了!周末放出“王炸信号”,这几个板块将直接起飞!

A股:下周稳了!周末放出“王炸信号”,这几个板块将直接起飞!

另子维爱读史
2026-01-24 19:47:56
鲁尼晒儿子老特拉福德首秀照片:为你感到骄傲,凯

鲁尼晒儿子老特拉福德首秀照片:为你感到骄傲,凯

懂球帝
2026-01-24 17:05:44
出大事了,乌克兰发起大规模袭击,普京不忍了,俄军收到一道指令

出大事了,乌克兰发起大规模袭击,普京不忍了,俄军收到一道指令

开车要双手
2026-01-24 20:28:56
女护士处理男患者隐私部位,会感觉难为情吗?美女护士说出大实话

女护士处理男患者隐私部位,会感觉难为情吗?美女护士说出大实话

第7情感
2025-09-17 12:12:15
泡腊八蒜时,最忌直接加醋泡!大厨:牢记3要3不要,大蒜1天变绿

泡腊八蒜时,最忌直接加醋泡!大厨:牢记3要3不要,大蒜1天变绿

阿龙美食记
2026-01-23 14:20:06
42票赞成、2票反对,美方将禁止对华出口H200芯片,中方先发制人

42票赞成、2票反对,美方将禁止对华出口H200芯片,中方先发制人

小小科普员
2026-01-23 16:40:52
2026-01-24 21:44:49
新浪财经 incentive-icons
新浪财经
新浪财经是一家创建于1999年8月的财经平台
2057561文章数 5294关注度
往期回顾 全部

科技要闻

特斯拉Cybercrab即将落地 每公里不到1块钱

头条要闻

越共中央政治局"新面孔"接近一半 现任国家主席没出现

头条要闻

越共中央政治局"新面孔"接近一半 现任国家主席没出现

体育要闻

当家球星打替补,他们在故意摆烂?

娱乐要闻

回归还是顶流 凤凰传奇将现身马年春晚

财经要闻

“百年老字号”张小泉遭60亿债务压顶

汽车要闻

有增程和纯电版可选 日产NX8或于3-4月间上市

态度原创

房产
手机
数码
公开课
军事航空

房产要闻

正式官宣!三亚又一所名校要来了!

手机要闻

华为Pura 80系列开启新年礼遇:至高优惠1500元,到手即享鸿蒙6

数码要闻

酷态科6号Ultra充电器曝光:双Type-C接口均支持100W快充

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

俄美乌首次三方会谈在阿联酋举行

无障碍浏览 进入关怀版