网易首页 > 网易号 > 正文 申请入驻

腾讯云发布智能数据湖计算 AI DLC,打通数据处理到 Agent 应用全流程

0
分享至

从数据处理到Agent 的链路正在被大幅压缩。

7月30日,记者获悉,腾讯云正式发布智能数据湖计算平台AI DLC,面向自动驾驶、具身智能、Agent等AI场景,提供覆盖数据处理、训练、推理到 Agent 应用的一体化能力。以腾讯自研的 WorkBuddy 为例,接入 AI DLC 后,其处理同一批数据的端到端时间缩短80%,完成相同任务所需算力约为此前的五分之一。


(腾讯云智能湖计算AI DLC架构)

长期以来,企业开发AI 应用通常需要先用 Spark 完成数据清洗和加工,再将结果写入存储,由 AI 团队通过 Ray 等框架完成训练和推理。不同环节运行在不同平台,数据需要反复搬运,权限、元数据和算力资源也要分别管理。

针对这一痛点,AI DLC 实现了 Spark 与 Ray 在同一平台运行。Spark 负责大规模数据处理和特征准备,Ray 承接多模态数据处理、模型训练、在线推理和 Agent 任务。两套框架共享数据、算力和权限体系,数据处理完成后即可直接进入训练和推理,无需跨平台搬运。

AI DLC 采用 Serverless 架构,算力可按任务秒级弹性伸缩、按使用时长计费,企业无需预留和运维固定集群。据介绍,它也是业内首个在同一平台提供生产级 Spark 与 Ray 全托管服务的计算平台。

在算力层面,AI DLC 将 CPU、GPU、TPU 等异构资源纳入统一资源池,根据数据处理、训练和推理任务动态调度。任务结束后,资源可自动释放并分配给其他作业,减少固定集群长期闲置。平台整体资源利用率可提升数倍,并已适配国产主流 GPU 芯片,帮助企业在自主可控的算力底座上运行 AI 负载。

为进一步提升计算效率,AI DLC 搭载腾讯云自研向量化计算引擎 Meson 和多模态计算引擎 Xpark。Meson 兼容 Spark API、SQL 语法及生态组件,在标准测试中查询性能提升3.6倍,部分复杂查询最高加速5倍,CPU使用率下降近一半;Xpark 面向文档、图片和音视频等多模态数据,提供50多种多模态和大模型算子,相比开源方案推理吞吐提升3倍,GPU利用率可长期接近100%。

除支撑数据处理和模型训练外,AI DLC 还面向 Agent 进行了升级。Agent 运行产生的轨迹、记忆和反馈可沉淀至数据湖,经过处理和后训练后持续反哺 Agent;平台同时通过 MCP、Skills 和 Open API 开放能力,让 WorkBuddy、CodeBuddy 等 Agent 直接调用数据处理、训练和分析能力。

这一模式已在腾讯内部得到验证。WorkBuddy 运行过程中持续产生对话、文档和用户反馈等数据,部分单字段达到 GB 级,数据量月增速超过100%。接入 AI DLC 后,这些数据可直接完成清洗、特征提取、模型后训练和评估回流,形成可复用的数据与训练流水线。

在自动驾驶场景中,博世测试车辆每天产生大量视频和传感器数据,抽帧和清洗主要消耗CPU,数据脱敏,模型训练与推理则依赖 GPU。通过博世ARENA统一管控平台,博世将数据处理、推理和部分训练任务纳入统一调度。目前,其平台已沉淀200多个推理模板,每天处理上万个推理任务,持续提升自动驾驶数据闭环效率。

随着企业AI 应用从模型走向 Agent,数据平台也正从支撑数据分析,升级为支撑 Agent 持续运行和迭代。在AI DLC之外,腾讯云已围绕 Agent-Ready 构建了覆盖基础引擎、统一控制面和上层 Data Agent 的完整数据平台能力,助力企业加快数据资产向智能应用转化。

雷峰网 雷峰网

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
万亿宁德时代迎至暗时刻:深陷舆论风暴,市值蒸发7000亿,理想、小米等多家车企“去宁化”,风波中的赛力斯坚守

万亿宁德时代迎至暗时刻:深陷舆论风暴,市值蒸发7000亿,理想、小米等多家车企“去宁化”,风波中的赛力斯坚守

金融界
2026-09-18 20:48:18
央媒痛批!新加坡双标行为惹怒中国,新加坡防长:中国要以德服人

央媒痛批!新加坡双标行为惹怒中国,新加坡防长:中国要以德服人

军情观察家
2026-09-17 12:37:32
中国忍的时候,中美打不起来。中国不忍的时候,中美有打仗的风险

中国忍的时候,中美打不起来。中国不忍的时候,中美有打仗的风险

安安说
2026-08-22 15:09:43
只首发2场就重返英格兰队,图赫尔看中的到底是什么?

只首发2场就重返英格兰队,图赫尔看中的到底是什么?

元气满分吖
2026-09-19 01:49:28
韩联社:已就欢迎仪式中出现的丰臣秀吉等人向亚洲奥委会抗议

韩联社:已就欢迎仪式中出现的丰臣秀吉等人向亚洲奥委会抗议

懂球帝
2026-09-18 19:11:08
Codex 里一句 hello,GPT-6 额度光速蒸发

Codex 里一句 hello,GPT-6 额度光速蒸发

呼呼历史论
2026-09-18 08:20:58
挤爆了!智谱创始人唐杰在清华设课首日座无虚席,还用大量作业「劝退」

挤爆了!智谱创始人唐杰在清华设课首日座无虚席,还用大量作业「劝退」

鞭牛士
2026-09-17 17:18:08
安东内拉进场庆祝,看到儿子蒂亚戈没穿鞋而训了他一顿

安东内拉进场庆祝,看到儿子蒂亚戈没穿鞋而训了他一顿

懂球帝
2026-09-18 11:25:12
网传某知名机器人被清华大佬狠批为上市圈钱大量造假,评论区炸锅

网传某知名机器人被清华大佬狠批为上市圈钱大量造假,评论区炸锅

慧翔百科
2026-09-17 11:52:47
中国第一巨人鲍喜顺:不听医生劝告非要生子,现在儿子怎么样了?

中国第一巨人鲍喜顺:不听医生劝告非要生子,现在儿子怎么样了?

春之韵
2026-09-18 12:45:38
专家警告:每天吃几颗核桃,就等于给心脏“踩刹车”?真相来了

专家警告:每天吃几颗核桃,就等于给心脏“踩刹车”?真相来了

医学原创故事会
2026-09-10 21:38:22
赔了夫人又折兵!以为能“毁掉”全红婵,不料自己先被扒个底朝天

赔了夫人又折兵!以为能“毁掉”全红婵,不料自己先被扒个底朝天

乐享人生风雨
2026-04-15 20:41:09
瑞银:油价上涨和美联储加息使得中国股票在区域中更具吸引力

瑞银:油价上涨和美联储加息使得中国股票在区域中更具吸引力

上海证券报
2026-09-18 13:16:12
9月18日,在人社部、财政部2026年退休人员养老金调整通知正式落地前,已有近20个省份率先公布2026年社保缴费基数

9月18日,在人社部、财政部2026年退休人员养老金调整通知正式落地前,已有近20个省份率先公布2026年社保缴费基数

扶苏聊历史
2026-09-18 14:26:25
欧洲巨头全球裁员,股价暴跌超21%

欧洲巨头全球裁员,股价暴跌超21%

财闻
2026-09-18 13:25:21
听听恒大前员工心里话:真实的许家印,和你想的完全不一样

听听恒大前员工心里话:真实的许家印,和你想的完全不一样

花小猫的美食日常
2026-08-23 05:03:59
苹果上架大量配件新品,价格太疯狂了!

苹果上架大量配件新品,价格太疯狂了!

芝麻科技讯官方号
2026-09-16 23:07:15
大西洋月刊长文:MAGA的世界革命正在让全球民主倒退,腐败畅行无阻

大西洋月刊长文:MAGA的世界革命正在让全球民主倒退,腐败畅行无阻

加拿大和美国必读
2026-09-16 00:40:28
打还是谈 美国准备怎么结束伊朗战争

打还是谈 美国准备怎么结束伊朗战争

新京报
2026-09-18 11:25:13
贺子珍始终认定朱道来便是战乱之中失散的儿子,可朱道来后来坦言:过去他没有道出所有真相

贺子珍始终认定朱道来便是战乱之中失散的儿子,可朱道来后来坦言:过去他没有道出所有真相

唠叨说历史
2026-09-15 14:16:32
2026-09-19 02:16:49
雷峰网 incentive-icons
雷峰网
关注智能与未来!
71034文章数 656244关注度
往期回顾 全部

科技要闻

直击iPhone 18新机发售:黄牛加价不如前代

头条要闻

俄杜马选举拉夫罗夫"意外"登顶名单 梅德韦杰夫被拿下

头条要闻

俄杜马选举拉夫罗夫"意外"登顶名单 梅德韦杰夫被拿下

体育要闻

好吧,中国男篮辛苦了

娱乐要闻

陈思诚 佟丽娅不想让儿子知道两人离婚

财经要闻

研发0.25亿理财26亿,敷尔佳豪赌三类器械

汽车要闻

纯电/插混双动力+五座/六座双布局 海狮08应该怎么选?

态度原创

家居
数码
教育
手机
亲子

家居要闻

2026建博会(广州) 公装联探展交流活动

数码要闻

Realforce静电容键盘GX1 Plus皮卡丘版亮相TGS2026

教育要闻

家委会气爆了!一小学班委会集资买打印机,被家长投诉,被迫解散,而此后上演的才是大戏

手机要闻

华为手机迎来双喜:Pura X View首周销量大增,Pura 100被传评估阔屏影像!

亲子要闻

带中俄混血宝宝来广州,战斗娃魔丸属性突然觉醒,丽安差点招架不住!

无障碍浏览 进入关怀版