游乐游手机版
首页/科技数码/文章详情

全球最小AI超算震撼问世:仅300克、算力超190TOPS

时间:2025-12-11 15:03
IT之家12月11日消息,科技媒体 Wccftech 昨日(12月10日)发布博文,报道称初创公司 Tiiny AI 发布号称全球最小的 AI 超级计算机 Tiiny AI Pocket Lab,仅

12月11日,IT之家援引科技媒体Wccftech报道称,初创公司Tiiny AI近日发布了一款号称全球最小的AI超级计算机——Tiiny AI Pocket Lab。这款设备重量仅300克,尺寸与手掌相当,却搭载了ARMv9.2架构的12核CPU和高达80GB的LPDDR5X内存,AI算力达到190 TOPS。

报道提到,这台迷你计算机的尺寸仅为14.2×8×2.53厘米,重量约300克,可以轻松握在掌心。尽管体积小巧,Tiiny AI宣称该设备能够成功部署参数规模达1200亿(120B)的大模型,这在同类便携设备中尚属首次。


Tiiny AI Pocket Lab正式亮相

据介绍,该设备支持的大语言模型(LLM)能胜任“博士级推理、多步骤分析和深度上下文理解”等复杂任务。其核心搭载了最新的ARMv9.2 12核CPU,并通过定制的异构计算模块(SoC + 独立NPU)提供约190 TOPS的AI算力。

为支撑庞大模型的流畅运行,该设备配备了高达80GB的LPDDR5X内存和1TB SSD存储空间。这种大容量内存配置让用户可以启用激进的量化技术,从而在本地环境中顺畅运行120B参数模型。此外,该设备的功耗控制表现出色,TDP为30W,典型系统功耗约为65W。


AI Pocket Lab重量仅为300克

为了在如此紧凑的设备上实用化运行120B模型,Tiiny采用了两项核心技术。首先是TurboSparse,这是一种神经元级别的稀疏激活技术,能在保持模型完整智能的同时,显著提升推理效率。

其次是PowerInfer,这是一个在GitHub上拥有超过8000颗星标的开源异构推理引擎。它能够通过动态分配CPU和NPU之间的计算任务,来加速繁重的大语言模型工作负载。


设备配备了高达80GB的LPDDR5X内存和1TB SSD存储空间

在软件生态方面,AI Pocket Lab支持一键部署GPT-OSS、Llama、Qwen、DeepSeek、Mistral和Phi等数十种主流开源模型及代理框架。它无需依赖互联网或云端,支持完全离线操作。Tiiny AI确认将在CES 2026上正式展出该设备。

来源:https://www.163.com/dy/article/KGGJ1Q3L0511B8LM.html
上一篇AI春晚遇冷?Agent成美国行业降温焦点 下一篇36氪独家:觉物科技亿级融资,扎根新疆五年打磨变形金刚
本站内容用于信息整理与展示,如有侵权或内容问题请及时联系处理。

相关推荐

补充同频道和同主题内容,方便继续浏览更多相关内容。

同类最新

继续查看同栏目最近更新的文章。

更多
宫本茂亲签3DS XL拍卖价破两万美元
科技数码 · 2026-05-29

宫本茂亲签3DS XL拍卖价破两万美元

今天来说一件挺有意思的事:2015年任天堂世界锦标赛冠军约翰·戈德堡,近日将他当年夺冠时赢得的宫本茂亲笔签名版3DS XL掌机放上了拍卖平台。截至2026年5月29日,这台签名掌机的竞拍价已突破两万美元,并且价格还在持续攀升。戈德堡在社交媒体上发布声明表示,经过相当长时间的慎重考虑,他决定将这台对自

七彩虹隐星P16 Pro游戏本新配置仅售7799元
科技数码 · 2026-05-29

七彩虹隐星P16 Pro游戏本新配置仅售7799元

七彩虹近期推出隐星P16Pro游戏本新配置,售价7799元。其搭载酷睿i9-13900HX处理器与RTX5060显卡,配备16英寸2 5K高刷电竞屏及高效散热系统。存储组合为16GB内存与1TB固态硬盘,支持后续扩展。该配置主打高性能性价比,适合预算有限但追求强劲性能的游戏玩家与轻度创作者。

苹果iPhone Hikawa握把支架448元重新上架
科技数码 · 2026-05-29

苹果iPhone Hikawa握把支架448元重新上架

苹果公司重新上架了与艺术家贝利·桧川及PopSockets合作设计的iPhone专用握把支架。该配件采用磁吸设计,兼具握持与支架功能,旨在通过人性化设计降低握持负担,并提供三种配色可选,售价448元。

苹果体育应用扩展至170市场 为2026世界杯引入对阵图
科技数码 · 2026-05-29

苹果体育应用扩展至170市场 为2026世界杯引入对阵图

苹果体育应用新增覆盖90多个国家和地区,全球可用市场总数超过170个。为迎接2026年世界杯,应用加入了完整的赛程对阵图和可视化阵型卡片,方便用户追踪赛事与战术。同时,应用支持实时活动功能,可将比分固定在锁屏或表盘,并新增一键跳转至新闻的入口。目前该应用仍仅限iPhone用户使用。

小米史上最强国产巅峰芯片玄戒O3 6月台积电3nm投产
科技数码 · 2026-05-29

小米史上最强国产巅峰芯片玄戒O3 6月台积电3nm投产

据博主爆料,小米下一代自研玄戒芯片计划于今年6月正式进入量产阶段,此次将采用台积电3nm工艺。初代玄戒O1累计出货量已突破100万颗,量产验证十分扎实。新一代芯片的产能将显著提升,这意味着供货问题基本得到解决。 根据现有曝光信息,这颗迭代芯片极有可能命名为玄戒O3,首发搭载机型预计为小米MIX Fo