网易首页 > 网易科技 > 网易科技 > 正文

微软使用了新硬件,称必应搜索AI性能提高10倍

0
分享至

(原标题:Microsoft's Brainwave makes Bing's AI over 10 times faster)

网易科技讯 3月27日消息,据VentureBeat报道,微软今天宣布,通过使用专门为人工智能(AI)计算开发的硬件,使其机器学习模型的性能提高10倍以上,而这些模型可以为必应(Bing)搜索引擎提供强大支持。

图:这是英特尔公司的Stratix 10 FPGA,微软在其数据中心使用的模型之一

微软的新系统被称为Brainwave,它的设计目的是接受训练有素的神经网络,尽可能快地运行它,并使其延迟时间最短。其目标是为应用程序提供大致实时的AI预测,比如新的必应功能。此举是微软向其云客户提供的又一项支持,让其云客户可以尽快运行他们自己的硬件驱动AI模型。

必应今天还进行了多项功能更新,包括在用户将鼠标指针悬停在不太常用单词上面的时候给出解释,并给出了如何回答问题的多种方式。这些功能都是由Brainwave额外支持的。

微软正在使用来自英特尔的现场可编程门阵列(FPGA)来进行AI计算。FPGA基本上就是空白画布,开发者可以通过发送新的软件来部署各种不同的电路。这提供了可编程性和性能的有趣组合,因为产生的电路对特定的应用程序(如AI计算)进行了优化,可以在不构建新芯片的情况下进行改进。

这种硬件让微软不仅能够创建更快的模型,而且还可以构建更复杂的AI系统,如果不应用专门的硬件,这些系统将需要大量的计算能力。例如,比为CPU构建的版本相比,必应的Turing Prototype 1模型复杂了10倍,这是由于使用Brainwave带来的计算能力增加的结果。虽然Brainwave版本更加复杂,但微软也能以10倍以上的速度从这个模型中获得结果。

微软的AI计算方法不同于其他同行,比如谷歌创建了自己的张量处理单元(TPU)芯片来提供类似的功能。与FPGA不同,谷歌的TPU一旦构建就不能重新配置,谷歌通过使其芯片架构尽可能广泛地处理各种潜在情况来应对这一问题。

微软公司已经部署的FPGA有专用的数字信号处理器,用于对AI所需的某些特定类型的数学进行优化。通过这种方式,公司能够获得与构建特定应用程序的集成电路(ASIC,如TPU)相同的好处。

亚马逊有“基础设施即服务”的实例,其中包括通过云计算的附加FPGA,不过该公司还没有详细讨论自己对硬件的使用。

Brainwave系统由几个组件组成,首先是微软在全球数据中心部署的成千上万的FPGA。该公司的大多数服务器都有FPGA板,连接到顶部的网络交换机上。这使得服务器能够处理软件定义的网络操作,但也为微软提供了硬件加速计算池,而不是每个服务器都绑定一个FPGA。

举例来说,Brainwave可以在多个FPGA之间分配一个模型,同时处理少量的CPU来支持它们。如果一个机器学习模型需要使用多个FPGA,那么微软的系统就会将它们捆绑到公司所称的“硬件微服务”中,然后将其传递给Brainwave编译器,以便在可用的硅上分配工作负载。

这个编译器将采用一个已训练完成的模型,使用像TensorFlow(源自谷歌)或微软认知工具包(也称为CNTK)的AI编程框架创建,并将其转换为一个中间表示,然后可以通过多个FPGA进行拆分,以获得最佳性能。

微软并没有优化每个在FPGA上执行的模型,而是在其芯片上创建了一个软处理器,它的设计目的是为机器学习推理提供通用的执行环境。这样,开发人员就不必花费时间来优化单个阵列,同时也可享受硬件加速计算的好处。

很难将微软的Brainwave与其他类似系统相比较,因为它的论文仅为专有的神经网络提供了具体的性能指标。这并不是说微软在这方面是独一无二的,谷歌的论文也指出其TPU是如何为公司本土算法提供性能数据的。

微软并没有将其Brainwave测试的结果与GPU进行比较,后者已经成为AI计算的热门选择。FPGA对这些芯片的好处在于,它们不需要大量使用批量计算。

允许微软在FPGA上获得高性能的关键创新技术之一是使用新的8到9位浮点数据类型。微软发现,这些数据类型提供了超过定点数据类型(比如8-16位整数)的性能提升,并且之需要最少的训练就可以利用这些数据类型。

微软也开始在它的数据中心部署特殊的设备,其中包括没有其他服务器组件的FPGA。这样,该公司就能更好地处理来自Brainwave的负载,因为它可以增加软编程硬件的数量,而不用增加更多的服务器。虽然更复杂的模型通常需要多个CPU,但它们不需要每个FPGA都有一个CPU。

微软对使用FPGA加速AI计算并不陌生。该公司的必应团队于2012年开始与硬件团队合作,此后一直在增加对这些芯片的使用。这一消息也对英特尔有利,英特尔在2015年收购了FPGA制造商Altera,这笔价值167亿美元的交易为前者提供了满足微软需求的燃料。

现在,微软正致力于向外界开放Brainwave系统。FPGA已经为其智能API的部分认知服务提供动力,这些API允许人们在没有AI的情况下将智能功能嵌入到他们的应用程序中。该公司还计划通过它的必应企业服务,来为企业客户提供今天所讨论的Brainwave驱动的文本理解能力。

沿着这条路走下去,我们很可能会看到通过微软Azure提供的Brainwave服务,这样客户就可以在微软的FPGA上部署他们自己的模型。 (小小)

相关推荐
热点推荐
花4亿,压6年,就为这?《寻秦记》电影版预告一出,老粉心凉半截

花4亿,压6年,就为这?《寻秦记》电影版预告一出,老粉心凉半截

影视口碑榜
2025-12-12 12:51:19
统一或成定局,五角大楼通告全球:美军介入台海,恐被解放军歼灭

统一或成定局,五角大楼通告全球:美军介入台海,恐被解放军歼灭

通文知史
2025-12-12 20:35:03
库里第5名!美媒公布21世纪25大巨星:哈登12杜兰特4科比屈居第二

库里第5名!美媒公布21世纪25大巨星:哈登12杜兰特4科比屈居第二

锅子篮球
2025-12-13 20:52:06
泰国发现情况不对,第三国势力进场帮柬埔寨?泰军用中文发表声明

泰国发现情况不对,第三国势力进场帮柬埔寨?泰军用中文发表声明

谛听骨语本尊
2025-12-12 22:22:34
出事了,美军突袭中国船只,销毁货物扬长而去,外媒:一月前干的

出事了,美军突袭中国船只,销毁货物扬长而去,外媒:一月前干的

深析古今
2025-12-13 13:17:25
中方行动再升级,对琉球措辞变了,高市请求对话,中方送上7个字

中方行动再升级,对琉球措辞变了,高市请求对话,中方送上7个字

博览历史
2025-12-12 20:57:32
前首相石破茂给高市早苗支招:认清中日实力对比,打不过就加入

前首相石破茂给高市早苗支招:认清中日实力对比,打不过就加入

近史谈
2025-12-13 23:37:24
宣布了!哈利伯顿加盟亚马逊!NBA第一组织控卫

宣布了!哈利伯顿加盟亚马逊!NBA第一组织控卫

篮球实战宝典
2025-12-12 22:06:14
插刀门13年后,印小天一举动实现口碑逆转

插刀门13年后,印小天一举动实现口碑逆转

大眼睛看看
2025-12-13 15:07:19
全球首个三星三折叠屏消费者诞生:42岁 严寒中排队将近24小时

全球首个三星三折叠屏消费者诞生:42岁 严寒中排队将近24小时

快科技
2025-12-13 21:34:09
有一种痛苦叫“买了第四代住宅”,幻想很高级,入住后一言难尽!

有一种痛苦叫“买了第四代住宅”,幻想很高级,入住后一言难尽!

装修秀
2025-12-11 10:45:03
柬埔寨不甘心战败,使用远程火箭炮打击泰国大坝,中国紧急发声

柬埔寨不甘心战败,使用远程火箭炮打击泰国大坝,中国紧急发声

麓谷隐士
2025-12-13 09:25:14
1.5亿欧元报价震动拜仁!巴黎圣日耳曼瞄准法国国脚

1.5亿欧元报价震动拜仁!巴黎圣日耳曼瞄准法国国脚

星耀国际足坛
2025-12-13 11:45:36
自绝后路不到24小时,范曾担心的事发生,遭殃的何止小50岁的娇妻

自绝后路不到24小时,范曾担心的事发生,遭殃的何止小50岁的娇妻

阿纂看事
2025-12-12 10:08:39
内讧爆发,鲁比奥暗中使坏,阻止特朗普联俄反华,已经被架空

内讧爆发,鲁比奥暗中使坏,阻止特朗普联俄反华,已经被架空

青烟小先生
2025-12-12 16:18:30
两位爱喝酒的演员,碰到了一起,这是吃的是什么下酒菜?

两位爱喝酒的演员,碰到了一起,这是吃的是什么下酒菜?

TVB的四小花
2025-12-14 00:00:57
全身麻醉相当于死过一次?医生揭秘,麻醉时你的身体都经历了什么

全身麻醉相当于死过一次?医生揭秘,麻醉时你的身体都经历了什么

DrX说
2025-12-12 16:10:23
泽连斯基,真汉子!

泽连斯基,真汉子!

近距离
2025-12-13 11:42:14
高市早苗再发表粗暴言论,公开警告中国,还要求中国:立刻停手!

高市早苗再发表粗暴言论,公开警告中国,还要求中国:立刻停手!

扶苏聊历史
2025-12-12 18:14:09
夫妻生活的巅峰技巧:如何让高潮持续5分钟,享受前所未有的爽

夫妻生活的巅峰技巧:如何让高潮持续5分钟,享受前所未有的爽

精彩分享快乐
2025-12-14 00:00:03
2025-12-14 01:08:49

科技要闻

比亚迪、小鹏、北汽,集体表态

头条要闻

百万支体温计2周抢空 有老板备20万现金一箱货都没买到

头条要闻

百万支体温计2周抢空 有老板备20万现金一箱货都没买到

体育要闻

有了风骚白人秃头,忘掉谈了10年的前任

娱乐要闻

插刀门后,印小天一举动实现口碑逆转

财经要闻

镁信健康闯关港交所:被指窃取商业秘密

汽车要闻

表面风平浪静 内里翻天覆地!试驾银河星舰7 EM-i

态度原创

家居
艺术
本地
公开课
军事航空

家居要闻

温润质感 打造干净空间

艺术要闻

全球十大昂贵的建筑错误,代价触目惊心!

本地新闻

云游安徽|阜阳三朝风骨,传承千年墨香

公开课

李玫瑾:为什么性格比能力更重要?

军事要闻

俄乌“和平计划”磋商顿巴斯成焦点

无障碍浏览 进入关怀版
×