网易首页 > 网易号 > 正文 申请入驻

“全球最小AI超算”问世:300克、190 TOPS算力

0
分享至

IT之家12月11日消息,科技媒体 Wccftech 昨日(12月10日)发布博文,报道称初创公司 Tiiny AI 发布号称全球最小的 AI 超级计算机 Tiiny AI Pocket Lab,仅重300克,尺寸如手掌大小,却搭载了 ARMv9.2 12核 CPU 和80GB LPDDR5X 内存,算力达190 TOPS。

IT之家援引博文介绍,该计算机尺寸仅为14.2×8×2.53厘米,重量约为300克,用户可轻松将其置于掌中。尽管体积小巧,Tiiny AI 声称该设备能成功部署1200亿(120B)参数的模型,这在同类设备中尚属首创。

Tiiny AI Pocket Lab发布

该设备支持的大语言模型(LLM)据称能完美处理“博士级推理、多步骤分析和深度上下文理解”任务,搭载了最新的 ARMv9.2 12核 CPU,并通过定制的异构模块(SoC + 独立 NPU)提供约190 TOPS 的 AI 算力。

为了支撑庞大的模型运行,该设备配备了高达80GB 的 LPDDR5X 内存和1TB SSD 存储空间。这种大容量内存配置让用户可以启用激进的量化技术,从而在本地环境中流畅运行120B 模型。此外,该设备功耗控制出色,TDP 为30W,典型系统功耗约为65W。

AI Pocket Lab重量为300克

Tiiny 为了在如此紧凑的设备上实用化120B 模型,采用了两项核心技术。首先是 TurboSparse,这是一种神经元级别的稀疏激活技术,能在保持模型完整智能的同时显著提高推理效率。

其次是 PowerInfer,这是一个拥有超过8000颗 GitHub 星标的开源异构推理引擎,它能通过动态分配 CPU 和 NPU 之间的计算任务来加速繁重的 LLM 工作负载。

设备配备了高达80GB 的 LPDDR5X 内存和1TB SSD 存储空间

在软件生态方面,AI Pocket Lab 支持一键部署 GPT-OSS、Llama、Qwen、DeepSeek、Mistral 和 Phi 等数十种主流开源模型及代理框架,无需依赖互联网或云端,支持完全离线操作。Tiiny AI 确认将在 CES 2026上正式展示该设备。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
遵义会议被撤职,张国焘要拉走部队,李德用俄语挡在毛主席身前

遵义会议被撤职,张国焘要拉走部队,李德用俄语挡在毛主席身前

听雪禅
2026-10-20 17:40:10
一次精日作死,彻底毁掉一辈子:留学生陈宇昕面临的四条绝路

一次精日作死,彻底毁掉一辈子:留学生陈宇昕面临的四条绝路

莫地方
2026-10-19 22:38:55
最邪恶的实验:6女4男船上共渡100天,失去法律约束,结果如何?

最邪恶的实验:6女4男船上共渡100天,失去法律约束,结果如何?

泪满过眼
2026-10-20 07:44:02
美国媒体确认了:乌克兰已提出新停战构想,白宫特使威特科夫将在圣彼得堡会见俄罗斯总统普京,并向他提交一份更新的结束乌克兰战争的方案

美国媒体确认了:乌克兰已提出新停战构想,白宫特使威特科夫将在圣彼得堡会见俄罗斯总统普京,并向他提交一份更新的结束乌克兰战争的方案

吉刻新闻
2026-10-21 13:19:17
刚刚通报!重庆三名干部接受审查调查

刚刚通报!重庆三名干部接受审查调查

新浪财经
2026-10-21 17:54:40
市民在地铁站内的读书空间看书,5小时后出站被扣15元超时费,广州地铁回应→

市民在地铁站内的读书空间看书,5小时后出站被扣15元超时费,广州地铁回应→

珠江时报
2026-10-21 17:36:47
经济日报的评论,替一个断掉的踏板撑腰

经济日报的评论,替一个断掉的踏板撑腰

鲁先生的笔
2026-10-19 23:29:24
现代韦小宝?贵州男子4女伴4娃,正妻是商K公主,正脸、家境曝光

现代韦小宝?贵州男子4女伴4娃,正妻是商K公主,正脸、家境曝光

谢鵑解说
2026-10-14 11:39:22
英伟达官宣重大突破

英伟达官宣重大突破

21世纪经济报道
2026-10-21 13:17:51
厂二代,正在失去他们的“电子丫鬟”

厂二代,正在失去他们的“电子丫鬟”

十点读书
2026-10-20 20:17:30
应急管理部:在重庆彭水县的山体崩塌事故中,网格员第一时间叫应,大幅减少了人员伤亡

应急管理部:在重庆彭水县的山体崩塌事故中,网格员第一时间叫应,大幅减少了人员伤亡

极目新闻
2026-10-21 19:28:17
葡萄牙足协用255欧元留住C罗!但C罗用5.3分证明他不行!

葡萄牙足协用255欧元留住C罗!但C罗用5.3分证明他不行!

罗吹终结者
2026-10-21 10:52:43
苏州“发明”的招工骗局:一套被全国复制的“人肉套利”模式

苏州“发明”的招工骗局:一套被全国复制的“人肉套利”模式

社会日日鲜
2026-10-20 12:46:19
最高65万欧元补偿,宝马8000个岗位被员工抢着走

最高65万欧元补偿,宝马8000个岗位被员工抢着走

全栈遛狗员
2026-10-20 17:44:00
复出才3天,全红婵泪洒当场,陈芋汐态度被揭,不再顾及所谓体面

复出才3天,全红婵泪洒当场,陈芋汐态度被揭,不再顾及所谓体面

艳姐的搞笑视频
2026-10-21 11:19:29
世界杯分组规则确定!中国队第一档,和塞尔维亚同组,抽签成形式

世界杯分组规则确定!中国队第一档,和塞尔维亚同组,抽签成形式

跑者排球视角
2026-10-21 12:53:21
甲钴胺被点名了!发现:神经受损吃甲钴胺,不用久等或有5个变化

甲钴胺被点名了!发现:神经受损吃甲钴胺,不用久等或有5个变化

垚垚分享健康
2026-10-21 18:28:22
苏轼晚年大彻大悟,写下最旷达的一词,百读不厌,抚慰后世千百年

苏轼晚年大彻大悟,写下最旷达的一词,百读不厌,抚慰后世千百年

千家诗行
2026-10-20 21:21:31
湖南知青抛弃丈夫和孩子回城,临走前脱掉衣服:让我们好好告个别

湖南知青抛弃丈夫和孩子回城,临走前脱掉衣服:让我们好好告个别

兰姐说故事
2025-01-27 15:10:03
张一鸣:遍地都是赚到百万的项目,但是99%的人选择埋头打工

张一鸣:遍地都是赚到百万的项目,但是99%的人选择埋头打工

一些小事
2026-09-22 06:17:58
2026-10-21 20:19:00
IT之家
IT之家
爱科技,爱这里 - 前沿科技人气平台
374160文章数 607632关注度
往期回顾 全部

科技要闻

SpaceX收入暴涨!马斯克:这事"不再不可能"

头条要闻

康奈尔校报做了件石破天惊的事:公布轮奸女生的7人姓名

头条要闻

康奈尔校报做了件石破天惊的事:公布轮奸女生的7人姓名

体育要闻

“我,对得起天津足球!”

娱乐要闻

张柏芝自曝五点陪伴儿子 谢霆锋尴尬了

财经要闻

昔日彩电一哥缘何在今天被挤下牌桌?

汽车要闻

高新华:奇瑞致力于成为AI驱动的智能科技公司

态度原创

教育
艺术
游戏
房产
时尚

教育要闻

2025年济南中考题,简单到离谱

艺术要闻

上海一个“地主恶霸”,却写出“最美中国字”,启功:人人都在学他的书法!

【新游黑马】NBA联动+美少女篮球?教练,你想打篮球了吗?

房产要闻

J&P 集团亮相 2026 中国品牌出海博览会| 深耕跨境20载,品牌出海有J&P

卡其裙、小棕裤,今年最好看的单品都在这了,穿出秋天的氛围与时髦

无障碍浏览 进入关怀版