游乐游手机版
首页/科技数码/文章详情

全球最小AI超算震撼问世:仅300克、算力超190TOPS

时间:2025-12-11 15:03
IT之家12月11日消息,科技媒体 Wccftech 昨日(12月10日)发布博文,报道称初创公司 Tiiny AI 发布号称全球最小的 AI 超级计算机 Tiiny AI Pocket Lab,仅

12月11日,IT之家援引科技媒体Wccftech报道称,初创公司Tiiny AI近日发布了一款号称全球最小的AI超级计算机——Tiiny AI Pocket Lab。这款设备重量仅300克,尺寸与手掌相当,却搭载了ARMv9.2架构的12核CPU和高达80GB的LPDDR5X内存,AI算力达到190 TOPS。

报道提到,这台迷你计算机的尺寸仅为14.2×8×2.53厘米,重量约300克,可以轻松握在掌心。尽管体积小巧,Tiiny AI宣称该设备能够成功部署参数规模达1200亿(120B)的大模型,这在同类便携设备中尚属首次。


Tiiny AI Pocket Lab正式亮相

据介绍,该设备支持的大语言模型(LLM)能胜任“博士级推理、多步骤分析和深度上下文理解”等复杂任务。其核心搭载了最新的ARMv9.2 12核CPU,并通过定制的异构计算模块(SoC + 独立NPU)提供约190 TOPS的AI算力。

为支撑庞大模型的流畅运行,该设备配备了高达80GB的LPDDR5X内存和1TB SSD存储空间。这种大容量内存配置让用户可以启用激进的量化技术,从而在本地环境中顺畅运行120B参数模型。此外,该设备的功耗控制表现出色,TDP为30W,典型系统功耗约为65W。


AI Pocket Lab重量仅为300克

为了在如此紧凑的设备上实用化运行120B模型,Tiiny采用了两项核心技术。首先是TurboSparse,这是一种神经元级别的稀疏激活技术,能在保持模型完整智能的同时,显著提升推理效率。

其次是PowerInfer,这是一个在GitHub上拥有超过8000颗星标的开源异构推理引擎。它能够通过动态分配CPU和NPU之间的计算任务,来加速繁重的大语言模型工作负载。


设备配备了高达80GB的LPDDR5X内存和1TB SSD存储空间

在软件生态方面,AI Pocket Lab支持一键部署GPT-OSS、Llama、Qwen、DeepSeek、Mistral和Phi等数十种主流开源模型及代理框架。它无需依赖互联网或云端,支持完全离线操作。Tiiny AI确认将在CES 2026上正式展出该设备。

来源:https://www.163.com/dy/article/KGGJ1Q3L0511B8LM.html
上一篇AI春晚遇冷?Agent成美国行业降温焦点 下一篇36氪独家:觉物科技亿级融资,扎根新疆五年打磨变形金刚
本站内容用于信息整理与展示,如有侵权或内容问题请及时联系处理。

相关推荐

补充同频道和同主题内容,方便继续浏览更多相关内容。

同类最新

继续查看同栏目最近更新的文章。

更多
年国家能源局充换电服务业用电量增速48.8%
科技数码 · 2026-06-29

年国家能源局充换电服务业用电量增速48.8%

2025年全社会用电量达103682亿千瓦时,同比增长5 0%。充换电服务业用电增速高达48 8%,信息传输与软件服务业增速17 0%。第三产业和居民用电对增长贡献率合计占一半。中国成为全球首个年度用电量超10 4万亿千瓦时的国家。

追风者 GLACIER ONE 360 S25 液冷散热器新品上市 联体风扇售价429元
科技数码 · 2026-06-29

追风者 GLACIER ONE 360 S25 液冷散热器新品上市 联体风扇售价429元

追风者冰川360S25液冷散热器售价429元,三联一体风扇便捷安装,冷头小体积纯铜底座噪音18dB,风扇转速300-2000RPM、风量75CFM、静压2 96mmAq,五年质保漏液包赔。

三星Galaxy Watch8用户反馈谷歌后台组件异常
科技数码 · 2026-06-29

三星Galaxy Watch8用户反馈谷歌后台组件异常

三星GalaxyWatch8、Watch5Pro、Watch6及Watch7用户反映,GooglePlayServices后台耗电异常,电量占比最高达99 97%,远超正常水平,严重影响续航。目前故障原因不明,谷歌尚未发布官方声明。

罗永浩批苹果iOS 27创新不足 盼新CEO改进
科技数码 · 2026-06-29

罗永浩批苹果iOS 27创新不足 盼新CEO改进

罗永浩批评苹果iOS27创新不足,称仅有双iPhone同号、音量分离等数十项细节改进,认为库克时代缺乏突破性创新,股市虽好但消费者只能被迫接受挤牙膏式升级。

年国产车出口710万辆,两家车企销量破百万
科技数码 · 2026-06-29

年国产车出口710万辆,两家车企销量破百万

2025年国产汽车出口总量达710万辆,同比增长21%。奇瑞以134万辆居首,比亚迪105万辆次之,上汽乘用车出口占比60%最高,长城出口51万辆。吉利、长安等主流品牌同步增长,小鹏、零跑等新兴品牌海外拓展加速。