网易首页 > 网易科技 > 网易科技 > 正文

英伟达打破实时对话AI的训练和推理用时记录

0
分享至

(原标题:Nvidia breaks records in training and inference for real-time conversational AI)

网易科技讯8月14日消息,据国外媒体报道,Nvidia用于开发和运行可理解和响应请求的对话式AI的GPU强化平台,已经达成了一些重要的里程碑,并打破了一些记录。

这对任何基于其技术进行开发的人来说意义重大——当中包括大大小小的公司,因为英伟达将很多用于实现这些进步的代码开源。那些代码用PyTorch编写,易于运行。

英伟达今天宣布的最大成果包括:BERT训练用时打破记录,进入1小时关口。BERT是世界上最先进的人工智能语言模型之一,也被广泛认为是自然语言处理(NLP)标杆的先进模型。Nvidia的AI平台仅仅需要53分钟就能够完成模型训练,经过训练的模型在短短2毫秒多一点的时间里(10毫秒在业内被认为是高水平线)就能够成功地做出推理(即利用通过训练学习到的能力得出结果)——又一个记录。

英伟达的这些突破不仅仅是吹嘘的资本——这些进步可为任何使用NLP对话式人工智能和GPU硬件的人提供切实的好处。Nvidia在它的其中一个SuperPOD系统上打破了训练时间记录,该SuperPOD系统由运行1472个V100 GPU的92个Nvidia DGX-2H系统组成;在运行Nvidia TensorRT的Nvidia T4 GPU上完成推理过程。Nvidia TensorRT在性能上超出高度优化的CPU许多个量级。不过,该公司将公开BERT训练代码和经过TensorRT优化的BERT样本,让所有人都可以通过GitHub利用。

除了这些里程碑以外,英伟达的研究部门还建立并训练了有史以来最大的一个基于“Transformer”的语言模型。这也是BERT的技术基础。该定制模型包含的参数多达83亿个,规模是当前最大的核心BERT模型BERT-Large的24倍。英伟达将这个模型命名为“Megatron”,它也对外提供了用于训练这个模型的PyTorch代码,因而其他人能够自行训练出类似的基于“Transformer”的大型语言模型。(乐邦)

相关推荐
热点推荐
掘金输球,火箭升至第3!感谢骑士送大礼,若胜独行侠,排名更稳

掘金输球,火箭升至第3!感谢骑士送大礼,若胜独行侠,排名更稳

熊哥爱篮球
2026-01-03 12:07:04
女性的私处哪种形态更好?女性阴部的形状类型有哪些?不妨来了解

女性的私处哪种形态更好?女性阴部的形状类型有哪些?不妨来了解

医者荣耀
2025-12-25 12:05:06
交警再次提醒:误闯红灯后只需一个动作,可以从扣6分变成只扣1分

交警再次提醒:误闯红灯后只需一个动作,可以从扣6分变成只扣1分

老特有话说
2025-12-03 23:00:01
2026年最冷时间表已出炉,啥时候最冷?冷多久?春节期间冷不冷?

2026年最冷时间表已出炉,啥时候最冷?冷多久?春节期间冷不冷?

小谈食刻美食
2026-01-03 11:41:58
三百万放银行吃利息,我可以不用上班吗?网友:看的津津有味

三百万放银行吃利息,我可以不用上班吗?网友:看的津津有味

夜深爱杂谈
2026-01-03 22:05:04
美国斩杀线遭多位外国博主揭穿,美国崩溃论熟悉的味道回来了?

美国斩杀线遭多位外国博主揭穿,美国崩溃论熟悉的味道回来了?

眼光很亮
2026-01-04 01:46:04
胡明轩私生活又被推上的热搜,这次胡母没有澄清,网友们猜测不一

胡明轩私生活又被推上的热搜,这次胡母没有澄清,网友们猜测不一

可乐谈情感
2026-01-02 15:43:49
《再见爱人5》李施嬅下车,结束八年感情!胡彦斌掀桌

《再见爱人5》李施嬅下车,结束八年感情!胡彦斌掀桌

巧妹电影
2026-01-03 13:41:56
当石油被抢后,西方普遍认为北京只能认栽,怎料中方一招逆转局面

当石油被抢后,西方普遍认为北京只能认栽,怎料中方一招逆转局面

小lu侃侃而谈
2026-01-02 19:54:47
上海反向换房的人越来越多了

上海反向换房的人越来越多了

霹雳炮
2026-01-03 18:54:43
赵本山没想到,15年前去台湾送出去的一瓶白酒,如今让他被竖拇指

赵本山没想到,15年前去台湾送出去的一瓶白酒,如今让他被竖拇指

法老不说教
2026-01-04 00:58:44
本田CR-V终于想通了!优惠6.4万,老车主:天塌了

本田CR-V终于想通了!优惠6.4万,老车主:天塌了

汽车网评
2026-01-03 21:38:01
“不是女生,是畜生”,00后女生整顿相亲市场,隔着屏幕都尴尬

“不是女生,是畜生”,00后女生整顿相亲市场,隔着屏幕都尴尬

妍妍教育日记
2026-01-03 14:48:22
特朗普称“美国在西半球的主导地位再也不会受到质疑”

特朗普称“美国在西半球的主导地位再也不会受到质疑”

环球网资讯
2026-01-04 01:17:16
古镇深夜大火,浓烟冲天,官方通报

古镇深夜大火,浓烟冲天,官方通报

南方都市报
2026-01-03 13:16:49
女护士让男友配药后续:女护士停职 知情人曝猛料  塞钱进的医院

女护士让男友配药后续:女护士停职 知情人曝猛料 塞钱进的医院

鋭娱之乐
2026-01-04 01:10:03
司晓迪删博后又跑外网“梅开二度”!还给男明星排名,太好笑了

司晓迪删博后又跑外网“梅开二度”!还给男明星排名,太好笑了

木子爱娱乐大号
2026-01-03 17:09:02
航班正要起飞女子舱内大喊“抓我抓我抓我”,飞机滑回延误1个多小时,女子被警察带走

航班正要起飞女子舱内大喊“抓我抓我抓我”,飞机滑回延误1个多小时,女子被警察带走

极目新闻
2026-01-03 12:14:58
中国被迫入局,不帮俄罗斯都不行?美国失算,中方走了一步妙棋

中国被迫入局,不帮俄罗斯都不行?美国失算,中方走了一步妙棋

小蔑谈事
2025-12-29 11:20:11
赵薇钻空子,凌晨空降酒庄直播间,多次亲自家主播,正嗨聊时被封

赵薇钻空子,凌晨空降酒庄直播间,多次亲自家主播,正嗨聊时被封

非常先生看娱乐
2026-01-01 18:03:27
2026-01-04 02:52:49

科技要闻

雷军:骂小米汽车有流量,但别故意抹黑

头条要闻

牛弹琴:美国入侵委内瑞拉 给世界带来三个血的教训

头条要闻

牛弹琴:美国入侵委内瑞拉 给世界带来三个血的教训

体育要闻

青岛西海岸官宣:郑智出任一线队主教练

娱乐要闻

司晓迪事件再升级 司晓迪称鹿晗最好

财经要闻

具身智能抢人大战:毕业一年 年薪300万

汽车要闻

奕派科技全年销量275,752辆 同比增长28.3

态度原创

手机
健康
游戏
本地
公开课

手机要闻

小米展示YU7门锁机械拉线:内外都有,专用备份电池

这些新疗法,让化疗不再那么痛苦

猎魂世界:开服后全主C状态及处境分析!不知不觉已经十二位了!

本地新闻

即将过去的2025年,对重庆的影响竟然如此深远

公开课

李玫瑾:为什么性格比能力更重要?

无障碍浏览 进入关怀版
×