网易首页 > 网易号 > 正文 申请入驻

比人脑快20000%,内置1152颗7nm芯片,全球最大神经拟态系统诞生|钛媒体AGI

0
分享至


Hala Point系统集群(图片来源:英特尔)

人工智能(AI)领域迎来重大事件。

北京时间4月18日凌晨,美国芯片巨头英特尔(Intel)宣布,其打造出全球最大的神经拟态系统——Hala Point,旨在支持未来类脑 AI 研究,以及解决 AI 目前在效率和可持续性等方面的挑战。

Hala Point内置1152个、基于Intel 4(7nm)制程的英特尔Loihi 2处理器,支持多达11.5亿个神经元和1280亿个突触,每秒可处理超过380万亿个8位突触和超过 240 万亿个神经元操作,相关系统最初部署在美国桑迪亚国家实验室。应用于仿生尖峰神经网络模型时,在运行神经元数量较低的情况下,Hala Point速度可比人脑快200倍(20000%)。

英特尔研究院神经拟态计算实验室总监Mike Davies表示:“目前,AI模型的算力成本正在以不可持续的速度上升。行业需要能够规模化的全新计算方法。为此,英特尔开发了Hala Point,将高效率的深度学习和新颖的类脑持续学习、优化能力结合起来。我们希望使用Hala Point的研究能够在大规模AI技术的效率和适应性上取得突破。”


事实上,所谓神经拟态芯片,是一种模拟生物神经元的芯片。

与普通芯片不同的是,神经拟态芯片的计算任务是由许多小单元进行的,单元之间通过类似生物神经的尖峰信号相互通信,并通过尖峰调整其行为。

早在2018年,基于英特尔研究院的先进技术研究,英特尔推出了首款神经拟态芯片Loihi,采用14nm制程,可应用于机器嗅觉等场景。


2021年,Loihi系列全面升级,英特尔发布了第二代神经拟态芯片Loihi 2,采用英特尔第一个EUV工艺节点Intel 4,芯片等效于4nm,实际为7nm工艺。

Loihi 2共有128个神经拟态核心,这128个内核每一个都有192KB的灵活内存,每个神经元可以根据模型分配多达4096个状态,而之前的限制只有24个。

与普通的CPU和GPU不同,神经拟态没有外部内存。每个神经元都有一小部分内存供其专用。主要作用是分配给不同神经元输入的权重、最近活动的缓存以及峰值发送到的所有其他神经元的列表。Loihi 2可以根据用途选择各种不同连接选项,这一点上有些类似于FPGA。

英特尔强调,在执行AI推理负载和处理优化问题时,Loihi 2神经拟态芯片系统的速度比常规CPU和GPU架构快50倍,同时能耗降低100倍。

除了硬件产品外,英特尔还发布了用于Loihi芯片的软件,一个名为Lava的新开发框架。该框架以及相关库都用Python编写,并在GitHub上开源,开发人员无需访问硬件即可为Loihi开发程序。

如今,英特尔已经将Loihi 2芯片用于机械臂、神经拟态皮肤、机器嗅觉等场景。英特尔表示,Loihi 2应用了众多类脑计算原理,如异步(asynchronous)、基于事件的脉冲神经网络(SNNs)、存算一体,以及不断变化的稀疏连接,以实现能效比和性能的数量级提升。神经元之间能够直接通信,而非通过内存通信,因此能降低整体功耗。

英特尔Hala Point神经拟态系统研究团队

而在新一轮 AI 技术引领下,4月17日,英特尔将这个神经拟态芯片进行“暴力组装”,构建了全球最大的神经拟态系统Hala Point 。

具体来说,Hala Point系统由封装在一个六机架的数据中心机箱中的1152个Loihi 2处理器(采用Intel 4制程节点)组成,大小相当于一个微波炉。该系统支持分布在 140544 个神经形态处理内核上的多达 11.5 亿个神经元和 1280 亿个突触,最大功耗仅为 2600 瓦。Hala Point还包括 2300 多个嵌入式 x86 处理器,用于辅助计算。

Hala Point 将处理、内存和通信通道集成在大规模并行结构中,提供总共 16 PB/s 的内存带宽、3.5 PB/s 的内核间通信带宽和 5 TB/s 的带宽(TB/s)的芯片间通信带宽。该系统每秒可以处理超过 380 万亿个 8 位突触和超过 240 万亿个神经元操作。

在用于仿生脉冲神经网络模型时,Hala Point能够以比人脑快20倍的实时速度运行其全部11.5亿个神经元,在运行神经元数量较低的情况下,速度可比人脑快200倍。虽然Hala Point并非用于神经科学建模,但其神经元容量大致相当于猫头鹰的大脑或卷尾猴的大脑皮层。

早期研究结果表明,通过利用稀疏性高达10比1的稀疏连接(sparse connectivity)和事件驱动的活动,Hala Point运行深度神经网络的能效比高达15 TOPS/W,同时无需对输入数据进行批处理。批处理是一种常用于GPU的优化方法,会大幅增加实时数据(如来自摄像头的视频)处理的延迟。尽管仍处于研究阶段,但未来的神经拟态大语言模型将不再需要定期在不断增长的数据集上再训练,从而节约数千兆瓦时的能源。

英特尔表示,Hala Point在其前身Pohoiki Springs的基础上实现了大幅提升,基于神经拟态计算技术提升了主流、常规深度学习模型的性能和效率,尤其是那些用于处理视频、语音和无线通信等实时工作负载的模型。其架构经过改进,神经元容量提高了10倍以上,性能提高了12倍。

目前,Hala Point是一个旨在改进未来商用系统的研究原型。英特尔预计其研究将带来实际技术突破,如让大语言模型拥有从新数据中持续学习的能力,从而有望在AI广泛部署的过程中,大幅降低训练能耗,提高可持续性。

英特尔透露,接下来,Hala Point系统将向桑迪亚国家实验室交付,从而标志着英特尔共享的大型神经拟态研究系统的首次部署,进一步推动神经拟态计算应用和类脑 AI 研究等。如今,英特尔神经拟态研究社区(INRC)成员总数已超过200个。

不过,英特尔这套神经拟态技术在深度学习领域仍面临一定的质疑。

Meta首席科学家、图灵奖得主Yann LeCun曾在2019年的一次会议上驳斥了神经拟态计算方法。他认为,神经形态方法没有取得实际成果,像ResNet等深神经网络已经在计算机视觉上取得了巨大的成功。

不过,IBM于2014年推出了TrueNorth芯片,尽管其运行频率只有几kHz,但它所模拟大脑尖峰神经网络所需的计算资源,只传统处理器0.0001%。Mike Davies曾表示,Loihi在某些特定工作负载上,可以比传统处理器效率高出2000倍。

新的 AI 时代已经到来,Hala Point或将成为未来英特尔打开AGI时代的重要一把“钥匙”。

(本文首发于钛媒体App,作者|林志佳,编辑|胡润峰)

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
事实证明,逆转王曼昱的孙颖莎,已经走上了另一条大道

事实证明,逆转王曼昱的孙颖莎,已经走上了另一条大道

小豆豆赛事
2024-04-22 08:35:03
雄鹿23分大胜,拒绝4-1出局!哈里魔法失效,西亚卡姆12分

雄鹿23分大胜,拒绝4-1出局!哈里魔法失效,西亚卡姆12分

闹闹体坛
2024-05-01 12:15:09
刘和平:无论哈马斯接不接受停火,以色列都会打下去

刘和平:无论哈马斯接不接受停火,以色列都会打下去

直新闻
2024-04-30 21:22:02
陈嘉桦回应田馥甄演出取消,表达三个方面问题,网友评论引热议

陈嘉桦回应田馥甄演出取消,表达三个方面问题,网友评论引热议

漫威小e
2024-05-01 03:12:58
王宝强马蓉的儿子已经长大,一眼就能看出是谁亲儿子,太像了!

王宝强马蓉的儿子已经长大,一眼就能看出是谁亲儿子,太像了!

阿芒娱乐说
2024-04-29 13:23:21
俄乌冲突将“结束”,拉夫罗夫突然宣布爆炸消息,普京已明确表态

俄乌冲突将“结束”,拉夫罗夫突然宣布爆炸消息,普京已明确表态

绝对军评
2024-04-29 08:15:59
刘亦菲称:因为这次的穿着被吐槽,精神内耗到半夜睡不着!

刘亦菲称:因为这次的穿着被吐槽,精神内耗到半夜睡不着!

娱乐的小灶
2024-04-29 15:17:12
什么情况?江苏一地多所学校公众号接连关停!老师叫好:有利于大家安心教学

什么情况?江苏一地多所学校公众号接连关停!老师叫好:有利于大家安心教学

上观新闻
2024-04-28 17:18:44
太意外了,4月最后一天雷声不断,5家上市公司同时被查

太意外了,4月最后一天雷声不断,5家上市公司同时被查

云姐闲聊
2024-05-01 09:34:47
女主播穿着丝袜回村相亲,男子直接上手就摸:天冷、我给你暖暖

女主播穿着丝袜回村相亲,男子直接上手就摸:天冷、我给你暖暖

佑宛故事汇
2024-04-30 11:34:07
琼阿梅尼:我更喜欢踢中场离开采访时仍在念叨:中场中场…

琼阿梅尼:我更喜欢踢中场离开采访时仍在念叨:中场中场…

直播吧
2024-05-01 06:13:09
乌云其木格同志逝世

乌云其木格同志逝世

新京报
2024-04-30 19:03:17
美媒评本赛季联盟最好的10位状元:22岁爱德华兹力压浓眉排第二!

美媒评本赛季联盟最好的10位状元:22岁爱德华兹力压浓眉排第二!

你的篮球频道
2024-05-01 08:57:00
特朗普称哈马斯杀害了许多人质,失去了谈判筹码!

特朗普称哈马斯杀害了许多人质,失去了谈判筹码!

坠入二次元的海洋
2024-04-30 23:04:16
都不生娃了?上海产科医生称:从一晚上8个剖腹产到现在1个没有!

都不生娃了?上海产科医生称:从一晚上8个剖腹产到现在1个没有!

阿燕姐说育儿
2024-04-29 14:16:33
Selina希望再添子女,透露将努力自然怀孕:梦想照亮人生新阶段

Selina希望再添子女,透露将努力自然怀孕:梦想照亮人生新阶段

郭哥带你小说看娱乐
2024-04-29 12:46:46
激动死了,看我遇到了谁?不愧是浪姐5的门面担当

激动死了,看我遇到了谁?不愧是浪姐5的门面担当

光影纪史
2024-04-30 15:43:17
事实证明,曾经为安倍晋三哭丧的吕丽萍,如今已成为“笑话”!

事实证明,曾经为安倍晋三哭丧的吕丽萍,如今已成为“笑话”!

娱乐八卦木木子
2024-04-29 20:43:58
1976年,我受伤退伍被未婚妻当面退亲,一年后我痊愈她后悔不已

1976年,我受伤退伍被未婚妻当面退亲,一年后我痊愈她后悔不已

微微的风
2024-04-25 18:46:04
听到足协的回应,汪海健笑了

听到足协的回应,汪海健笑了

新民晚报
2024-05-01 10:10:49
2024-05-01 13:10:44
钛媒体APP
钛媒体APP
独立财经科技媒体
100726文章数 858313关注度
往期回顾 全部

科技要闻

余承东卸任华为终端CEO 新任命为董事长

头条要闻

问界M7事故砸窗救人男子:若早1分钟我能把3人都拽出来

头条要闻

问界M7事故砸窗救人男子:若早1分钟我能把3人都拽出来

体育要闻

"意甲最佳"金玟哉 踢回了中超水平...

娱乐要闻

黄子韬被曝求婚徐艺洋 大量亲密照曝光

财经要闻

俞敏洪,踏足A股!

汽车要闻

预售2.89-3.49万 奔腾小马正式开启预售

态度原创

亲子
家居
房产
本地
公开课

亲子要闻

再不穿背带裤就长大了,可爱

家居要闻

心之所栖 黑白灰色系打造设计专属感

房产要闻

单价2万内,装标4200+,主城改善大盘无套路硬刚!

本地新闻

食味印象 | 潍坊:碳水脑袋的人间乐园

公开课

父亲年龄越大孩子越不聪明?

无障碍浏览 进入关怀版