网易首页 > 网易科技 > 网易科技 > 正文

微软使用了新硬件,称必应搜索AI性能提高10倍

0
分享至

(原标题:Microsoft's Brainwave makes Bing's AI over 10 times faster)

网易科技讯 3月27日消息,据VentureBeat报道,微软今天宣布,通过使用专门为人工智能(AI)计算开发的硬件,使其机器学习模型的性能提高10倍以上,而这些模型可以为必应(Bing)搜索引擎提供强大支持。

图:这是英特尔公司的Stratix 10 FPGA,微软在其数据中心使用的模型之一

微软的新系统被称为Brainwave,它的设计目的是接受训练有素的神经网络,尽可能快地运行它,并使其延迟时间最短。其目标是为应用程序提供大致实时的AI预测,比如新的必应功能。此举是微软向其云客户提供的又一项支持,让其云客户可以尽快运行他们自己的硬件驱动AI模型。

必应今天还进行了多项功能更新,包括在用户将鼠标指针悬停在不太常用单词上面的时候给出解释,并给出了如何回答问题的多种方式。这些功能都是由Brainwave额外支持的。

微软正在使用来自英特尔的现场可编程门阵列(FPGA)来进行AI计算。FPGA基本上就是空白画布,开发者可以通过发送新的软件来部署各种不同的电路。这提供了可编程性和性能的有趣组合,因为产生的电路对特定的应用程序(如AI计算)进行了优化,可以在不构建新芯片的情况下进行改进。

这种硬件让微软不仅能够创建更快的模型,而且还可以构建更复杂的AI系统,如果不应用专门的硬件,这些系统将需要大量的计算能力。例如,比为CPU构建的版本相比,必应的Turing Prototype 1模型复杂了10倍,这是由于使用Brainwave带来的计算能力增加的结果。虽然Brainwave版本更加复杂,但微软也能以10倍以上的速度从这个模型中获得结果。

微软的AI计算方法不同于其他同行,比如谷歌创建了自己的张量处理单元(TPU)芯片来提供类似的功能。与FPGA不同,谷歌的TPU一旦构建就不能重新配置,谷歌通过使其芯片架构尽可能广泛地处理各种潜在情况来应对这一问题。

微软公司已经部署的FPGA有专用的数字信号处理器,用于对AI所需的某些特定类型的数学进行优化。通过这种方式,公司能够获得与构建特定应用程序的集成电路(ASIC,如TPU)相同的好处。

亚马逊有“基础设施即服务”的实例,其中包括通过云计算的附加FPGA,不过该公司还没有详细讨论自己对硬件的使用。

Brainwave系统由几个组件组成,首先是微软在全球数据中心部署的成千上万的FPGA。该公司的大多数服务器都有FPGA板,连接到顶部的网络交换机上。这使得服务器能够处理软件定义的网络操作,但也为微软提供了硬件加速计算池,而不是每个服务器都绑定一个FPGA。

举例来说,Brainwave可以在多个FPGA之间分配一个模型,同时处理少量的CPU来支持它们。如果一个机器学习模型需要使用多个FPGA,那么微软的系统就会将它们捆绑到公司所称的“硬件微服务”中,然后将其传递给Brainwave编译器,以便在可用的硅上分配工作负载。

这个编译器将采用一个已训练完成的模型,使用像TensorFlow(源自谷歌)或微软认知工具包(也称为CNTK)的AI编程框架创建,并将其转换为一个中间表示,然后可以通过多个FPGA进行拆分,以获得最佳性能。

微软并没有优化每个在FPGA上执行的模型,而是在其芯片上创建了一个软处理器,它的设计目的是为机器学习推理提供通用的执行环境。这样,开发人员就不必花费时间来优化单个阵列,同时也可享受硬件加速计算的好处。

很难将微软的Brainwave与其他类似系统相比较,因为它的论文仅为专有的神经网络提供了具体的性能指标。这并不是说微软在这方面是独一无二的,谷歌的论文也指出其TPU是如何为公司本土算法提供性能数据的。

微软并没有将其Brainwave测试的结果与GPU进行比较,后者已经成为AI计算的热门选择。FPGA对这些芯片的好处在于,它们不需要大量使用批量计算。

允许微软在FPGA上获得高性能的关键创新技术之一是使用新的8到9位浮点数据类型。微软发现,这些数据类型提供了超过定点数据类型(比如8-16位整数)的性能提升,并且之需要最少的训练就可以利用这些数据类型。

微软也开始在它的数据中心部署特殊的设备,其中包括没有其他服务器组件的FPGA。这样,该公司就能更好地处理来自Brainwave的负载,因为它可以增加软编程硬件的数量,而不用增加更多的服务器。虽然更复杂的模型通常需要多个CPU,但它们不需要每个FPGA都有一个CPU。

微软对使用FPGA加速AI计算并不陌生。该公司的必应团队于2012年开始与硬件团队合作,此后一直在增加对这些芯片的使用。这一消息也对英特尔有利,英特尔在2015年收购了FPGA制造商Altera,这笔价值167亿美元的交易为前者提供了满足微软需求的燃料。

现在,微软正致力于向外界开放Brainwave系统。FPGA已经为其智能API的部分认知服务提供动力,这些API允许人们在没有AI的情况下将智能功能嵌入到他们的应用程序中。该公司还计划通过它的必应企业服务,来为企业客户提供今天所讨论的Brainwave驱动的文本理解能力。

沿着这条路走下去,我们很可能会看到通过微软Azure提供的Brainwave服务,这样客户就可以在微软的FPGA上部署他们自己的模型。 (小小)

相关推荐
热点推荐
4月份江苏退休,过渡性养老金补了680元,2025年能补发750元吗?

4月份江苏退休,过渡性养老金补了680元,2025年能补发750元吗?

碎月导师
2024-04-29 12:00:03
李思思现身桂林,坐在街边吃米粉打扮洋气,脸上卡粉闷痘皮肤不好

李思思现身桂林,坐在街边吃米粉打扮洋气,脸上卡粉闷痘皮肤不好

娱乐白名单
2024-04-29 17:18:27
神舟十七号三名航天员正在返回

神舟十七号三名航天员正在返回

新京报
2024-04-30 16:44:39
足坛狂欢夜:巴萨4-2逆转,莱斯特城3-0夺冠,日本2-0挺进奥运会

足坛狂欢夜:巴萨4-2逆转,莱斯特城3-0夺冠,日本2-0挺进奥运会

侃球熊弟
2024-04-30 05:06:18
中方最高层访欧之际,美国要对古巴下重手,我防长把话说明白

中方最高层访欧之际,美国要对古巴下重手,我防长把话说明白

DS北风
2024-04-30 18:20:14
杨怡自曝和老公财政独立!对方出轨绝不回头,公开夫妻改名原因

杨怡自曝和老公财政独立!对方出轨绝不回头,公开夫妻改名原因

代友龙聊科普
2024-04-30 09:41:20
1997年,中国银行内部审计查账,发现周总理30年前存入1.2万英镑

1997年,中国银行内部审计查账,发现周总理30年前存入1.2万英镑

回京历史梦
2024-04-23 11:21:27
普尔爆料金州勇士正在追求杜兰特,库明加和维金斯将被送走

普尔爆料金州勇士正在追求杜兰特,库明加和维金斯将被送走

林子说事
2024-04-30 16:45:40
久事悲惨出局后,宣布五个重要决定,沪蜜感到绝望: 彻底完蛋了

久事悲惨出局后,宣布五个重要决定,沪蜜感到绝望: 彻底完蛋了

弄月公子
2024-04-30 11:41:16
布林肯回美国后,萧美琴突然向大陆发难,赵少康回应,洪秀柱表态

布林肯回美国后,萧美琴突然向大陆发难,赵少康回应,洪秀柱表态

DS北风
2024-04-30 10:28:12
报复太快!中国高铁被踢出保加利亚,西班牙中标无法交付项目取消

报复太快!中国高铁被踢出保加利亚,西班牙中标无法交付项目取消

影视解说阿相
2024-04-29 19:29:43
报复太快!中国高铁被踢出保加利亚,现在西班牙没法交付 取消项目

报复太快!中国高铁被踢出保加利亚,现在西班牙没法交付 取消项目

小怪吃美食
2024-04-29 21:10:01
国足残阵迎战泰国!目标3分,CCTV5直播

国足残阵迎战泰国!目标3分,CCTV5直播

室内设计师阿喇
2024-04-30 02:34:23
放弃中国籍,主动加入日本自卫队华裔占比日军总数的2.5%

放弃中国籍,主动加入日本自卫队华裔占比日军总数的2.5%

史政先锋
2024-04-28 11:18:30
玉渊谭天:五星红旗与金门岛同框意味着什么

玉渊谭天:五星红旗与金门岛同框意味着什么

环球网资讯
2024-04-29 21:46:23
她是正国级领导之女,投资银行界的佼佼者,敢打敢拼令人佩服

她是正国级领导之女,投资银行界的佼佼者,敢打敢拼令人佩服

历史1949
2024-04-30 00:19:36
海南神秘商人被指吃军队土地“霸王餐”躺赚超5亿,拒回应质疑

海南神秘商人被指吃军队土地“霸王餐”躺赚超5亿,拒回应质疑

刘虎和朋友们
2024-04-30 17:09:25
张颂文综艺收视炸了,打了多少资方的脸!芒果台又赌对了

张颂文综艺收视炸了,打了多少资方的脸!芒果台又赌对了

科普说娱乐
2024-04-29 09:23:26
啪啪打脸!俄罗斯征兵官员说漏嘴了:以目前兵力,我们无法应付

啪啪打脸!俄罗斯征兵官员说漏嘴了:以目前兵力,我们无法应付

娱宙观
2024-04-27 09:30:22
光伏龙头...隆基业绩暴雷!

光伏龙头...隆基业绩暴雷!

金石随笔
2024-04-30 08:33:22
2024-04-30 19:06:44

科技要闻

华为一季度营收1784.5亿 净利196.5亿

头条要闻

乌军总司令:俄军在整个前线发动进攻 乌面临形势严峻

头条要闻

乌军总司令:俄军在整个前线发动进攻 乌面临形势严峻

体育要闻

唏嘘!詹库杜19年首次无人进分区半决赛

娱乐要闻

黄子韬被曝求婚徐艺洋 大量亲密照曝光

财经要闻

查道炯:中国经济的外部挑战与应对思考

汽车要闻

越野老炮最爱 哈弗新H9新增2.4T柴油机

态度原创

本地
数码
亲子
手机
旅游

本地新闻

食味印象 | 潍坊:碳水脑袋的人间乐园

数码要闻

酷比魔方 GTBook 15 Gen2 笔记本开售:12 代 N95、1199 元起

亲子要闻

宝妈分享刚睡醒的宝宝,“脑袋大脖子粗,不是大款就是小猪”

手机要闻

Canalys:2024 Q1全球手机市场增长达10% 三星重回第一

旅游要闻

五一大雨,浇灭了多少旅游城市的心气?

无障碍浏览 进入关怀版
×