网易首页 > 网易号 > 正文 申请入驻

“全球最小AI超算”问世:300克、190 TOPS算力

0
分享至

IT之家12月11日消息,科技媒体 Wccftech 昨日(12月10日)发布博文,报道称初创公司 Tiiny AI 发布号称全球最小的 AI 超级计算机 Tiiny AI Pocket Lab,仅重300克,尺寸如手掌大小,却搭载了 ARMv9.2 12核 CPU 和80GB LPDDR5X 内存,算力达190 TOPS。

IT之家援引博文介绍,该计算机尺寸仅为14.2×8×2.53厘米,重量约为300克,用户可轻松将其置于掌中。尽管体积小巧,Tiiny AI 声称该设备能成功部署1200亿(120B)参数的模型,这在同类设备中尚属首创。

Tiiny AI Pocket Lab发布

该设备支持的大语言模型(LLM)据称能完美处理“博士级推理、多步骤分析和深度上下文理解”任务,搭载了最新的 ARMv9.2 12核 CPU,并通过定制的异构模块(SoC + 独立 NPU)提供约190 TOPS 的 AI 算力。

为了支撑庞大的模型运行,该设备配备了高达80GB 的 LPDDR5X 内存和1TB SSD 存储空间。这种大容量内存配置让用户可以启用激进的量化技术,从而在本地环境中流畅运行120B 模型。此外,该设备功耗控制出色,TDP 为30W,典型系统功耗约为65W。

AI Pocket Lab重量为300克

Tiiny 为了在如此紧凑的设备上实用化120B 模型,采用了两项核心技术。首先是 TurboSparse,这是一种神经元级别的稀疏激活技术,能在保持模型完整智能的同时显著提高推理效率。

其次是 PowerInfer,这是一个拥有超过8000颗 GitHub 星标的开源异构推理引擎,它能通过动态分配 CPU 和 NPU 之间的计算任务来加速繁重的 LLM 工作负载。

设备配备了高达80GB 的 LPDDR5X 内存和1TB SSD 存储空间

在软件生态方面,AI Pocket Lab 支持一键部署 GPT-OSS、Llama、Qwen、DeepSeek、Mistral 和 Phi 等数十种主流开源模型及代理框架,无需依赖互联网或云端,支持完全离线操作。Tiiny AI 确认将在 CES 2026上正式展示该设备。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
爆砍45+9+7+2!23岁状元秀:我想拿MVP和总冠军

爆砍45+9+7+2!23岁状元秀:我想拿MVP和总冠军

篮球大视野
2026-08-13 13:29:40
1904年,王维勤被活剐凌迟时一张罕见留影,脸面向人群充满绝望

1904年,王维勤被活剐凌迟时一张罕见留影,脸面向人群充满绝望

小豫讲故事
2026-08-11 06:00:16
中方摊牌了,敢对购买俄油国家加关税,美必遭反制,当天就能生效

中方摊牌了,敢对购买俄油国家加关税,美必遭反制,当天就能生效

共工之锚
2026-08-13 00:14:05
王水牛事件涉事女生拼命清理账号,作为受害者也跟着一起遭殃

王水牛事件涉事女生拼命清理账号,作为受害者也跟着一起遭殃

映射生活的身影
2026-08-12 17:18:36
钱学森儿子钱永刚坦言:父亲当年要是留在美国,我的人生发展或更顺利,不至于拖到34岁才大学毕业

钱学森儿子钱永刚坦言:父亲当年要是留在美国,我的人生发展或更顺利,不至于拖到34岁才大学毕业

磊子讲史
2026-08-03 11:15:30
Shams:威少休赛期收到国王和奇才合同报价,但仍选择退役

Shams:威少休赛期收到国王和奇才合同报价,但仍选择退役

懂球帝
2026-08-13 07:51:09
黄一鸣自曝:王思聪每次约她,车费都给10万,来给5万,回再给5万

黄一鸣自曝:王思聪每次约她,车费都给10万,来给5万,回再给5万

汉史趣闻
2025-06-24 10:07:59
胡明轩领衔今晚中国男篮12人大名单,广东男篮接触新的大外,王少杰新赛季留在北控

胡明轩领衔今晚中国男篮12人大名单,广东男篮接触新的大外,王少杰新赛季留在北控

凯丰侃球
2026-08-13 14:20:48
关之琳被曝与27岁男模交往,男方已承认恋情,“奶孙恋”登顶热搜

关之琳被曝与27岁男模交往,男方已承认恋情,“奶孙恋”登顶热搜

LULU生活家
2026-08-12 20:25:35
“黄毛爸爸,酒蒙子妈妈”,上海小学生天崩开局,结局却有反转

“黄毛爸爸,酒蒙子妈妈”,上海小学生天崩开局,结局却有反转

世界圈
2026-07-21 08:00:14
苹果9月发布会倒计时:8款新品曝光,20周年全玻璃大招却黄了

苹果9月发布会倒计时:8款新品曝光,20周年全玻璃大招却黄了

智能手机那点事
2026-08-11 21:48:36
朱可夫晚年亲口承认:德军撤出莫斯科那一夜,并非俄军打赢了,是斯大林下了一道没人敢提的命令,如何在一夜之间捏碎了德军的铁血意志?

朱可夫晚年亲口承认:德军撤出莫斯科那一夜,并非俄军打赢了,是斯大林下了一道没人敢提的命令,如何在一夜之间捏碎了德军的铁血意志?

辛某人
2026-08-10 17:10:00
刘嘉玲晒侄子获奖现场照,高颜值建筑师晚辈才华出众

刘嘉玲晒侄子获奖现场照,高颜值建筑师晚辈才华出众

墨薷桃桃
2026-08-10 16:40:22
员工台风天上班临时请假1小时被重罚,公司称其未提前一天请假,人社部门:处罚行为违规,可向劳动监察部门投诉

员工台风天上班临时请假1小时被重罚,公司称其未提前一天请假,人社部门:处罚行为违规,可向劳动监察部门投诉

极目新闻
2026-08-12 21:53:12
他是上海知名主持,和潘涛是多年好友,年过6旬开始享受退休生活

他是上海知名主持,和潘涛是多年好友,年过6旬开始享受退休生活

阿讯说天下
2026-08-13 11:35:43
沙利文曾亲口认错:佩洛西2022年窜台,是一次重大战略失误

沙利文曾亲口认错:佩洛西2022年窜台,是一次重大战略失误

桑启红原
2026-07-22 10:28:57
靠严打稳不住社会,解决就业才是真正的根本

靠严打稳不住社会,解决就业才是真正的根本

华庭讲美食
2026-08-06 08:49:13
局势反转!中国队全新参赛策略,名古屋亚运商业大局失控了

局势反转!中国队全新参赛策略,名古屋亚运商业大局失控了

秋枫凋零
2026-08-13 01:18:44
伊朗强硬派担任要职,马上对中方表示:伊朗与中国有一项战略协议

伊朗强硬派担任要职,马上对中方表示:伊朗与中国有一项战略协议

李橑在北漂
2026-08-13 14:59:34
一个从中国搬回日本的日本博士,破防了

一个从中国搬回日本的日本博士,破防了

日本物语
2026-07-05 20:35:41
2026-08-13 16:11:00
IT之家
IT之家
爱科技,爱这里 - 前沿科技人气平台
360223文章数 607438关注度
往期回顾 全部

科技要闻

DeepSeek V4 Pro更新:性价比炸裂 仍需打磨

头条要闻

于东来宣布胖东来许昌生活广场年底关闭 周围商户发声

头条要闻

于东来宣布胖东来许昌生活广场年底关闭 周围商户发声

体育要闻

负债十几亿的联赛,还在疯狂买球星

娱乐要闻

篡改红歌已立案,郭德纲大祸临头

财经要闻

韩国可能迎来失去的三十年

汽车要闻

试了奇瑞捷豹路虎神行者8,才知道它的i-ATS有多强?

态度原创

教育
游戏
本地
亲子
军事航空

教育要闻

取消中考,直升高中?多地开启12年一贯制试点 !

《羊蹄山之魂:完全版》确认将会推出实体光盘

本地新闻

黄州一夜,苏轼写给普通人的月光

亲子要闻

9岁女孩确诊性早熟 医生:这些生活习惯被忽视

军事要闻

特朗普发文:伊朗已经完蛋

无障碍浏览 进入关怀版