网易首页 > 网易科技 > 网易智能 > 正文

争抢AI芯:英特尔推CPU+FPGA 能打败GPU和TPU吗

0
分享至


【网易智能讯 4月12日消息】近日,英特尔宣布与科大讯飞达成技术合作,共同优化在机器学习与深度学习领域的离线训练与在线预测,并在上周举办电博会上进行了展示。网易智能采访到了英特尔技术专家与科大讯飞深度学习平台研发总监张致江,双方阐述了合作的具体内容以及未来在AI上的技术路线以及发展。

英特尔AI芯片技术布局:CPU+FPGA

据了解,2016年11月,英特尔和讯飞签署了一个为期是三年的人工智能技术合作框架。英特尔与科大讯飞的技术合作涵盖了深度学习的完整流程,包括数据采集,离线训练(Traning),在线预测(Inferencing),采集新数据组,进行新的离线训练。

机器学习/深度学习中最重要的技术是离线训练和在线推理。针对离线训练,英特尔和讯飞主要是针对现在的KNL和即将要发布的KNM来提升讯飞在深度学习平台的性能。科大讯飞深度学习平台研发总监张致江表示,英特尔下一代的处理器KNL和KNM这方面去做这样的事情效果非常好,目前在这个上面做的跟主流的深度学习处理方案水平相差很小,同时下一代的KNL、KNM因为有很大的显存、编程的特性,未来可能考虑用这种方案去做平台建设。张致江称,现在主流的一些加速方案可能会限制整个计算的memory,而KNL、KNM实际上是打破了这样一个限制。

在线推理方面,主要是用英特尔的FPGA技术。张致江称,在线预测传统的方法基本上都是用CPU的方式去做这样的事情,但是随着业务量的增长整个服务器的数量也是随着线性增长的,成本太高。张致江称,我们在用CPU加FPGA的方案去做的时候,一台服务器里面就插了一张FPGA的加速处理器,整个性能是远远超过于两台甚至三台、四台CPU机器的性能,成本也会降低很多。

也就是说,英特尔将人工智能芯片的技术路径分为离线训练与在线推理两方面,针对离线训练会主推至强融核KNL/KNM处理器(KNM尚未上市),特点是针对单精度操作进行了优化,支持自启动,能够独立运行操作系统和应用软件,内置片上内存,直接通过内存控制器从DDR4内存读取数据到处理器缓存,对行业标准的开源深度学习框架进行了优化。在线预测阶段,英特尔主推至强CPU+Arria10 FPGA的方案,声称可以实现低延迟高通量在线处理,因为英特尔A10 FPGA原生支持并行多通道任务处理,超过1500个单精度浮点计算单元会同片上/本地存储提供稳定的低处理迟延,成本更低。

基于CPU+FPGA,能替代GPU吗?



英特尔人工智能事业部(AIPG)首席技术官Amir Khosrowshahi在最近接受媒体采访时表示,目前所使用GPU太低级了,半导体行业需要构建全新的神经网络架构。Khosrowshahi认为,在执行图形渲染过程中辅助图形处理单元的部分功能是没有必要的,比如大容量缓存,顶点处理,渲染和纹理等等,从能源利用率上考虑也产生了相当高的成本。Khosrowshahi称,“神经网络则相当简单,利用小巧的矩阵乘法和非线性就能直接创建半导体来实现 GPU 的功能,而且你所创建的半导体非常忠诚于神经网络架构,显然这是 GPU 所无法给予的。”

而CPU+FPGA的优势在于,对于开发人员CPU的编程是相对比较容易的。如果说是用CPU加另外一个企业的加速处理器,往往这个加速处理器跟CPU不是编程体系或者不是一个优化体系,那么就要选另外一套优化体系。张致江称,如果你不是学计算机专业的,这相当于另外一个,它是一个异构体系,你去优化这个异构体系的性能,实际上还是非常吃力的,它甚至跟CPU完全不一样。英特尔出了KNL、KNM这样的东西,你在CPU上写的程序直接放上去就可以了,只要再学习一点点优化方法效率就能很好,所以我觉得这个接受程度会更高。

但显然,GPU是占了先机的,NVIDIA的方案是目前人工智能的主流。张致江坦言,人工智能刚刚兴起也就是这几年,刚刚兴起之初业内很多人都是用GPU这个方案去做的,但是AI有自己的一些计算特点,这时候我们就看了KNL和FPGA,我们做的KNL、FPGA不能说是比它多好或者比它差,它是两种不同应用领域的东西,有擅长、有适合的地方,GPU有些地方走的时间比较早一点,可能它的库各方面会成熟一些。因为FPGA的原因,在编程方式各方面更加容易,会更加适合这样一些特殊应用场景的需求。

英特尔技术专家认为,FPGA最初是用在通讯领域,在英特尔收购的Altera这家公司出的这一代产品,当时很多人普遍认为他们出的这一代东西不是很好,为什么不是很好呢?是因为在通讯领域另外一些发现会更好,但是后来我们做过研究发现A10这一代更加适合深度学习和大数据的应用场景,而且获得了非常好的效果。

谷歌TPU秒杀CPU/GPU,CPU+FPGA能招架吗?



英特尔用CPU+FPGA叫板GPU,但谷歌的TPU成了螳螂后面的黄雀。

近日,谷歌首次透露TPU细节,其执行谷歌常规机器学习工作负载的处理速度比GPU/CPU快15-30倍。这一消息表明随着人工智能的发展,以往的GPU/CPU架构已经相对落后。

不过除了Google,英特尔通过不断的收购也在进行相关的研发。Khosrowshahi给出的答案:就是目前尚在开发中的Lake Crest,这是英特尔今年会面向部分客户提供离散加速器。但伴随着时间的推移,它将会成为Xeon处理器的最佳伴侣。

另外,软件的优化和整合也是英特尔、英伟达、谷歌抢占市场的关键。张致江称,无论在前端还是后端,英特尔擅长的其实是底层的计算架构、硬件这一块,讯飞特别擅长的在于软件这一块,包括有自己的算法、神经网络、数据结构模型、处理方式等等。(小羿)

关注网易智能菌(微信公众号:smartman163),获取专业人工智能资讯与AI报告。

相关推荐
热点推荐
“官场小说家”杨克宁被双开:懒政怠政,主动“躺平”

“官场小说家”杨克宁被双开:懒政怠政,主动“躺平”

澎湃新闻
2024-05-23 12:00:29
裂开!洛卡特利打满整年&3300万身价为落选球员独一档,法乔利...

裂开!洛卡特利打满整年&3300万身价为落选球员独一档,法乔利...

直播吧
2024-05-23 23:10:17
伊朗总统座机失事后,飞行员的电话为何接通?

伊朗总统座机失事后,飞行员的电话为何接通?

中国新闻周刊
2024-05-23 19:04:10
乒乓球太原赛:混双4强诞生!国乒3大主力出局,王楚钦孙颖莎败北

乒乓球太原赛:混双4强诞生!国乒3大主力出局,王楚钦孙颖莎败北

全言作品
2024-05-24 12:21:34
紧急提醒:近期风险高发!别买!别吃!严重可致人死亡→

紧急提醒:近期风险高发!别买!别吃!严重可致人死亡→

BRTV新闻
2024-05-23 16:10:22
地产股开盘集体下挫 我爱我家跌停

地产股开盘集体下挫 我爱我家跌停

财联社
2024-05-24 09:37:09
A股再度冲高回落,局面很明朗了!

A股再度冲高回落,局面很明朗了!

财经聪哥
2024-05-24 12:26:50
网友在西安吃饭被多算钱还遭辱骂威胁?警方:40元的菜未上引争执,店长被行拘

网友在西安吃饭被多算钱还遭辱骂威胁?警方:40元的菜未上引争执,店长被行拘

极目新闻
2024-05-24 10:52:17
豪宅3年亏540万美元,本西蒙斯NBA效力6年,一共赚到了多少钱?

豪宅3年亏540万美元,本西蒙斯NBA效力6年,一共赚到了多少钱?

锅子篮球
2024-05-24 14:37:22
官宣!前男篮国手刘传兴正式签约中国香港金牛 广东曾有意引进

官宣!前男篮国手刘传兴正式签约中国香港金牛 广东曾有意引进

醉卧浮生
2024-05-24 11:26:27
网红郭有才不干了,宣布停播

网红郭有才不干了,宣布停播

电商报APP
2024-05-23 11:01:10
江苏一女子结婚当天,被人认出做过小姐,客人:看着很眼熟!

江苏一女子结婚当天,被人认出做过小姐,客人:看着很眼熟!

娱乐洞察点点
2024-05-24 09:37:32
这竟然是李小璐的女儿,好漂亮啊!

这竟然是李小璐的女儿,好漂亮啊!

娱乐八卦木木子
2024-05-23 20:46:09
就业蓄水池,快盛不下了

就业蓄水池,快盛不下了

七叔东山再起
2024-05-23 21:14:17
农村麻将馆:乱到让人不可思议

农村麻将馆:乱到让人不可思议

校长侃财
2024-04-10 12:26:40
胶州买房可“以旧换新”!首批9个项目公布

胶州买房可“以旧换新”!首批9个项目公布

齐鲁壹点
2024-05-24 05:48:24
小天才手表违禁词“逼疯”家长!客服最新回应

小天才手表违禁词“逼疯”家长!客服最新回应

中国经营报
2024-05-23 07:41:07
辞去这些职务后,“70后”中央候补委员履新!

辞去这些职务后,“70后”中央候补委员履新!

小卫爱数学
2024-05-24 10:17:28
江苏:女子相亲被婉拒,每日打扮娇艳上门去做饭,男子:快沦陷了

江苏:女子相亲被婉拒,每日打扮娇艳上门去做饭,男子:快沦陷了

户外阿崭
2024-05-24 06:19:04
看了鸨鸟怎么交配,才知道古代青楼的老板娘,为何叫“老鸨”!

看了鸨鸟怎么交配,才知道古代青楼的老板娘,为何叫“老鸨”!

趣味萌宠的日常
2024-05-24 04:11:32
2024-05-24 16:06:44

科技要闻

对话王小川:我们不跟进大模型价格战

头条要闻

媒体:国台办就"何时会从围台军演到断然出手"给出答案

头条要闻

媒体:国台办就"何时会从围台军演到断然出手"给出答案

体育要闻

阿兰,好久不见

娱乐要闻

霍启仁求婚成功,郭晶晶要有妯娌了

财经要闻

白重恩解读2024中国经济的3个关键问题

汽车要闻

宝马M品牌上新 2024年在华推出近10款高性能车型

态度原创

教育
旅游
艺术
本地
公开课

教育要闻

食堂就是课堂,老师不能缺席

旅游要闻

“旅游热”持续升温 ,这些关于景区的谣言别信

艺术要闻

穿越时空的艺术:《马可·波罗》AI沉浸影片探索人类文明

本地新闻

我和我的家乡|千阳槐花季,一起“花”式过夏天

公开课

近视只是视力差?小心并发症

无障碍浏览 进入关怀版
×