网易首页 > 网易号 > 正文 申请入驻

榨干GPU剩余价值,京东云vGPU池化方案推动大模型降本

0
分享至

“新质生产力”、“全国一体化算力体系”成为两会后产业界热议的话题。3月28日,京东云城市大会落子深圳,全景展示了携手大湾区、助力国家算力枢纽节点建设的“京东云力量”。

智能化之战某种意义上是算力之战,而单纯硬件的比拼,难以将模型效用最大化。打造软硬件一体化协同的AI能力,最大化发挥算力硬件价值,从而实现算法、算力与平台的打通,才是智能化发展的关键。会上,京东云发布智算云全栈解决方案,以阿尔法智能算力模块、云海分布式存储、言犀AI开发计算平台等为支撑,面向云化运营支持和产业融合。

与此同时,大会发布了京东云全栈国产化解决方案,以产品+工具+服务,助推产业从单纯国产化替代,走向全面国产化升级。

会上,京东云还与韶实集团,深圳国家高技术产业创新中心、中国联通深圳分公司等签署合作协议,全面支持粤港澳大湾区统一算力调度及数字产业发展。

软硬协同,打好智算“组合拳”

云计算是AI应用落地的重要基础。京东云认为,打造软硬协同的AI能力,实现算法、算力与平台的打通,是大模型发展的关键因素。


如何让GPU资源充分发挥价值,是大模型应用过程中亟待解决的问题。京东云云舰推出的vGPU池化方案,在原有混合多云CPU+GPU异构算力池化能力基础上,针对大模型场景,支持训练+微调+推理混合部署,进一步增加了针对AI应用所需的调度管理能力,GPU利用率最高提升70%。

算力利用率提升后,只有高性能的软件与之匹配,才能让大模型在产业端落地。大模型训练呈现海量小文件的特点,文件数量可达百亿级。传统存储性能不足,就会导致GPU算力闲置。作为金融行业探索大模型的先锋,中国建设银行从去年起就启动了大模型应用的开发和训练。在实际应用中,发现京东云云海的高性能分布式存储,可以完美匹配上大模型训练的高速数据存取,大幅提升训练效率,降低算力成本。

为了应对大模型训练资源稀缺,以及缺乏专业开发人员等问题,京东云将京东大模型能力开放出来,推出言犀AI开发计算平台。平台提供一站式模型训练推理能力,让大模型的能力轻松触达每一位开发者,实现产业领域的“智能涌现”。

作为全球首家实现L3级别自动驾驶的智能重卡企业,嬴彻科技自动驾驶涉及到大量的AI训练作业。京东云为其提供高性能AI算力,使用高性能存储系统,满足AI训练对数据高速共享的需求。同时,通过在公有云上部署AI开发平台,京东云为其提供包含数据准备、开发、训练、部署在内的AI开发全链路服务,让嬴彻科技更专注于自身业务发展。


真替真用,精准发力“技术降本”

智能化浪潮为国产化升级提供了新契机。由于海外对我国高端芯片的技术封锁,国产化GPU迫在眉睫。京东云认为,要在实践中建立自主研发和产业发展相辅相成的正循环,国产化不仅要真替真用,更要创造真价值。国产化不是简单的静态替代,而应该借助云原生等先进技术,在国产化建设的过程中,实现IT系统的改造升级。


京东云通过大规模产业实践,在生产场景中优化适配能力,以软件能力反哺硬件,国产化整体性能实现大幅度提升,甚至在部分场景超过原有非国产化的运行效果。目前,京东集团已有多个业务实现用1:1的资源对非国产化芯片的替换。

同时,源于对技术极致降本的底气,京东云在会上正式发布“春风计划”,在产品、价格、服务三个方面持续升级;同时设立“10亿比价金”——京东云全系核心产品开启全网比价,对标主流云厂商价格,在其最低实际成交单价基础上再低10%,买贵就赔。

此外,京东云还重磅发布了生态伙伴池和生态权益资源池,和合作伙伴携手推动千行百业的数智化进程。面向未来,京东云将持续依托领先的云计算技术和完整的平台服务能力,为大湾区提供安全、专业、稳定、便捷的数智化服务,加速数字经济与实体产业融合。

本文源自金融界资讯

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
博世称问界M7涉事车辆并未搭载博世智驾系统

博世称问界M7涉事车辆并未搭载博世智驾系统

鞭牛士
2024-04-28 17:32:15
午睡可能影响寿命!再次提醒:过了50岁后,午睡“三不要”得牢记

午睡可能影响寿命!再次提醒:过了50岁后,午睡“三不要”得牢记

奇妙的本草
2024-04-28 18:00:06
深圳楼市,全面取消限购,多米诺骨牌崩塌

深圳楼市,全面取消限购,多米诺骨牌崩塌

楼市诸葛
2024-04-29 07:00:09
6届全明星!连续11年场均得分20+,摆上货架1年,为什么都不抢呢

6届全明星!连续11年场均得分20+,摆上货架1年,为什么都不抢呢

体育客栈
2024-03-09 10:48:49
走错路也要罚!浙江男子出门散步被交警罚款?评论区一片哀嚎

走错路也要罚!浙江男子出门散步被交警罚款?评论区一片哀嚎

鹏飞深文
2024-04-29 11:16:47
深夜突发,重大消息震惊国内外金融圈,央视新闻滚屏播报三分钟

深夜突发,重大消息震惊国内外金融圈,央视新闻滚屏播报三分钟

静守时光落日
2024-04-29 12:14:56
大连出台楼市新政:对“卖旧买新”个人给予补贴

大连出台楼市新政:对“卖旧买新”个人给予补贴

界面新闻
2024-04-29 15:18:00
哈马斯宣布“重新归来”:以色列在加沙200天,混了个现在的结局

哈马斯宣布“重新归来”:以色列在加沙200天,混了个现在的结局

章鱼哥娱乐
2024-04-25 22:13:11
证券突发惊掉下巴的消息,金融圈传的沸沸扬扬,A股的好戏要开始

证券突发惊掉下巴的消息,金融圈传的沸沸扬扬,A股的好戏要开始

彩云的夕阳
2024-04-29 13:54:15
国产啤酒真是坏到家了,国产啤酒几乎无一幸免,全部检测出毒素!

国产啤酒真是坏到家了,国产啤酒几乎无一幸免,全部检测出毒素!

小怪吃美食
2024-04-29 14:57:07
刚刚, 日本突然宣布!半导体和量子将被纳入出口管制,所有出口均需获得官方许可

刚刚, 日本突然宣布!半导体和量子将被纳入出口管制,所有出口均需获得官方许可

和讯网
2024-04-28 16:35:48
7国外长统一战线,集体围攻中国,沉默3天后,中方从5路发起反击

7国外长统一战线,集体围攻中国,沉默3天后,中方从5路发起反击

知鉴明史
2024-04-29 17:06:47
福建舰确实动了,掉个头挪了个窝,五一海试有可能

福建舰确实动了,掉个头挪了个窝,五一海试有可能

三叔的装备空间
2024-04-29 17:28:37
寒心,广东男子救落水小孩后收了一条烟,家长:烟很贵以为他不要

寒心,广东男子救落水小孩后收了一条烟,家长:烟很贵以为他不要

东东趣谈
2024-04-28 08:45:31
美国想收割中国,半路杀出多个程咬金,美国绷不住了

美国想收割中国,半路杀出多个程咬金,美国绷不住了

文昌每日谈
2024-04-29 13:08:45
繁忙的北京车展,无人相信的产能过剩

繁忙的北京车展,无人相信的产能过剩

直新闻
2024-04-28 15:41:38
都什么年代了,为何还有这种反人性的事迹宣传?

都什么年代了,为何还有这种反人性的事迹宣传?

故园老丁
2024-04-28 21:24:04
新冠疫苗问题秋后算账!首席科学家杨晓明被抓,他的罪名不止一项

新冠疫苗问题秋后算账!首席科学家杨晓明被抓,他的罪名不止一项

做人要有态度
2024-04-29 10:01:01
只得4分但抢17个篮板!哈特:手感不佳时要找到其他方法影响比赛

只得4分但抢17个篮板!哈特:手感不佳时要找到其他方法影响比赛

直播吧
2024-04-29 17:10:23
坏消息不断!美国DTCC不承认比特币有价值、资金疯狂逃离比特币ETF 加密货币前景堪忧?

坏消息不断!美国DTCC不承认比特币有价值、资金疯狂逃离比特币ETF 加密货币前景堪忧?

FX168链界观察
2024-04-28 07:35:17
2024-04-29 18:14:44
金融界
金融界
投资者信赖的财经金融门户网站
1990656文章数 540255关注度
往期回顾 全部

科技要闻

马斯克想把特斯拉中国数据送出国 这事太难

头条要闻

外交部回应美国法案涉华消极条款 连用四个“严重”

头条要闻

外交部回应美国法案涉华消极条款 连用四个“严重”

体育要闻

足球童话!执教16年,从业余联赛到德甲

娱乐要闻

田馥甄遭抵制,蔡依林却能稳稳捞金?

财经要闻

牛市,无需多言

汽车要闻

配置更丰富 静态体验2024款欧拉好猫

态度原创

房产
艺术
本地
游戏
公开课

房产要闻

力度越来越大!落户两年享本地居民购房政策,海南第16城松绑限购!

艺术要闻

共度北京108小时 北京当代2024“凝聚”全球36座城市100余家艺术机构

本地新闻

食味印象 | 潍坊:碳水脑袋的人间乐园

8分好评!IGN法国《剑星》评测出炉:扎实的佳作

公开课

父亲年龄越大孩子越不聪明?

无障碍浏览 进入关怀版