游乐游手机版
首页/科技数码/文章详情

端侧AI的密度法则与昇腾算力协同实践

时间:2026-03-30 13:55
过去几年,大模型行业的注意力更多集中在云端,关注参数规模、推理速度或者能力榜单,而如今,客户关心的不是模型能不能更“强”,而是能不能在真实算力条件下跑起来,能不能稳定服务用户,能不能把成本压到一个可

过去几年,大模型行业的注意力更多集中在云端,关注参数规模、推理速度或者能力榜单,而如今,客户关心的不是模型能不能更“强”,而是能不能在真实算力条件下跑起来,能不能稳定服务用户,能不能把成本压到一个可控范围里。在华为中国合作伙伴大会 2026 的现场,面壁智能联合创始人& COO 雷升涛、华为制造与大企业军团软件与ICT企业总经理孙健在接受媒体采访时,为行业揭开了答案。

过去几年,大模型行业的注意力更多集中在云端,关注参数规模、推理速度或者能力榜单,而如今,客户关心的不是模型能不能更“强”,而是能不能在真实算力条件下跑起来,能不能稳定服务用户,能不能把成本压到一个可控范围里。

在华为中国合作伙伴大会 2026 的现场,面壁智能联合创始人& COO 雷升涛、华为制造与大企业军团软件与ICT企业总经理孙健在接受媒体采访时,分享了双方在端侧大模型领域的技术协同成果,让端侧大模型从实验室走向实际应用。

密度法则:破解端侧模型瘦身难题的核心逻辑

大模型的发展长期依靠规模法则(Scaling Law)推动,不断扩大训练数据和模型参数来提升模型能力。但当大模型向端侧延伸,算力、内存、功耗的三重约束,让单纯的参数堆砌失去了实际意义。面壁智能率先提出的密度法则,为端侧大模型的发展找到了另一条路径。

雷升涛在采访中详解了密度法则的核心内涵,模型能力密度每 3.3个月翻一番,这意味着同等能力的模型,在 3.3 个月后仅需要一半的参数就能实现。

这一法则在面壁智能小钢炮系列模型的演进中得到了反复验证,从 MiniCPM 2.4B,到后续 4B、9B,再到最新的 MiniCPM-o 4.5,每一代模型都实现了同等参数下性能更强,同等性能下参数量更小的突破。MiniCPM-o 4.5 更是凭借 9B 参数规模实现了全双工全模态能力,而达到同类能力的云端模型,通常需要几百亿的参数规模。

密度法则的落地,并非简单的模型压缩,而是需要在架构、算法、推理、数据、训练等多个不同维度的同步创新,才能实现“瘦身不降智”。

在雷升涛看来,密度法则更是带有中国特色的规模法则。在算力资源有限的背景下,通过知识密度的提升,用算法、数据和架构的创新实现模型能力的突破,让模型越做越小,让 AI 的普及成为可能,这正是 AGI 发展的重要路径。而从云端蒸馏模型做端侧的方式,会导致模型的支持密度不断降低,难以适应端侧场景的实际需求,这也让密度法则的技术价值更加凸显。

软硬协同,华为与面壁的技术协同

端侧场景的限制远比想象中严苛,算力不高、功耗敏感、温控紧张,推理链路的任何浪费都会被成倍放大。

从 2024 年开始,面壁智能与华为开始合作。早期双方从模型适配开始,让 MiniCPM 系列可以在昇腾芯片上运行,然后到推理优化阶段,通过算子融合、内存复用等技术提升速度,双方联合发布性能数据,这一过程并不轻松。

华为为面壁智能提供了坚实的底层算力支撑,而面壁智能则基于密度法则实现了模型的“瘦身不降智”,二者的技术路线形成了天然的互补。

而面壁智能选择与华为深度合作,源于技术、服务与场景的三重契合。雷升涛指出,端侧模型的落地需要与芯片高度适配,从云端 FP16 精度到端侧 4 bit、2 bit的量化,双方深度的协同优化则让模型的推理速度更快、功耗更低,让模型在发布的同时就完成了算力适配,能够以最快的速度服务市场和客户。

从汽车场景到具身智能,端侧 AI 开启规模化应用

技术的创新最终要落地到实际的商业场景中,端侧大模型在多个行业实现了规模化落地,而汽车则成为端侧 AI 落地最快、需求最迫切的领域。

雷升涛表示,汽车领域的智能化趋势,让智能座舱成为用户体验的核心,而面壁智能的端侧模型已经在吉利、长安马自达等多款量产车型上落地。

汽车场景的特殊性,让端侧模型的价值得到了充分体现,在地下车库、隧道等无网络环境中,端侧模型的离线可用、毫秒级响应能力,解决了云端模型的痛点,而隐私安全的特性也契合了车载场景的需求。用户在车上的停留时间长,对交互体验的要求高,端侧 AI 带来的体验提升直观可见。

除了汽车,手机、智能家居也是面壁智能端侧模型落地的重要领域。随着端侧算力的不断提升,模型能力密度的持续突破,会有更多的端侧场景拥抱大模型技术。

对于端侧 AI 的未来“爆款应用”,雷升涛比较看好具身智能。目前的机器人本体发展迅速,但缺少真正的“大脑”,缺乏与真实世界的感知交互、任务规划执行能力和泛化能力。而面壁智能的 MiniCPM-o 4.5 具备类人感知与交互能力,可以补齐具身机器人的大脑能力。雷升涛表示,接下来端侧模型落地到具身智能,会带来一些杀手级的应用,以及更广泛的应用场景。

协同共赢为中国端侧 AI 发展奠定基础

孙健表示 ,“我们的合作在技术路径、生态构建和产业安全三个维度为行业提供了标杆示范。”

特别是华为硬件开放、软件开源的策略,与面壁智能的技术创新相结合,激活了开源开放的生态,大幅降低了开发者进入端侧 AI 领域的门槛。

面对 AI 模型和应用的爆发式增长,华为通过算力底座升级、全栈工具链开放、生态深度协同、安全保障四大核心路径,为软件高科技企业提供从技术研发到商业落地的全生命周期服务,帮助企业在 AI 浪潮中构建核心竞争力。

端侧 AI 的真正挑战不在于模型参数,而在于工程能力、生态基础和产业协同。面壁智能与华为的探索,让我们看到了端侧 AI 的无限可能,而这种协同共赢的模式,也将成为中国 AI 产业发展的核心竞争力,推动 AI 技术真正融入千行百业。

来源:https://www.51cto.com/article/839154.html
上一篇Ant Design AI设计工具正式发布:高效体验与核心功能详解 下一篇理想马赫100科研团队论文入选2026年ISCA工业分轨
本站内容用于信息整理与展示,如有侵权或内容问题请及时联系处理。

相关推荐

补充同频道和同主题内容,方便继续浏览更多相关内容。

同类最新

继续查看同栏目最近更新的文章。

更多
云米科技CEO奖励员工小米YU7 期待未来再奖励更多台
科技数码 · 2026-07-08

云米科技CEO奖励员工小米YU7 期待未来再奖励更多台

云米科技创始人兼CEO陈小平通过社交平台正式揭晓了公司年会上的“重磅大奖”:一辆小米YU7汽车,专为表彰一位长期服务核心客户、始终坚守岗位并成功推动项目实现关键突破的员工。获奖理由简洁而有力——“尽职尽责、持之以恒”。陈小平在现场还定下目标:“希望到2026年,能送出更多台车。” 这句话,既是对员工

腾讯开源Node模块联邦方案hel-micro-node
科技数码 · 2026-07-08

腾讯开源Node模块联邦方案hel-micro-node

腾讯近日正式发布开源项目 hel-micro-node,作为 hel+ 生态体系中的核心组件,专门为 Node js 运行环境量身打造,旨在提供一种轻量化、高效率且易于使用的服务端模块联邦解决方案。与同类产品 @module-federation node 相比,hel-micro-node 在功能

doc个人图书馆因业务调整无偿转让寻找接管方
科技数码 · 2026-07-08

doc个人图书馆因业务调整无偿转让寻找接管方

日前,知识分享平台“360doc个人图书馆”正式对外发布官方公告。自2005年上线以来,这一经典数字图书馆已稳健运营整整二十年,累计服务用户超过八千万,沉淀文章数量突破十一亿篇。作为国内知名的免费知识管理公益平台,它不仅承载了无数人的智慧积累与珍贵记忆,更在个人知识存档与内容管理领域保持了独特的品牌

iPhone Air 2最新传闻 散热与双扬声器及双摄成重点
科技数码 · 2026-07-08

iPhone Air 2最新传闻 散热与双扬声器及双摄成重点

细想起来,距离苹果那款备受期待的超薄系列新机——我们暂时称之为iPhone Air 2——正式亮相,其实已经不到一年了。产业链上陆续传出的消息都在暗示,苹果这次决心放一个大招,在散热、音频、影像这几个核心体验上动真格的。 iPhone Air 销量与市场反响 此前不少舆论认为初代iPhone Air

上海交大今日正式发布自研光学垂直大模型
科技数码 · 2026-07-08

上海交大今日正式发布自研光学垂直大模型

光学领域最近迎来了一位重量级新成员——上海交通大学正式推出了面向光学垂直方向的大模型Optics GPT。官方将其定义为一位“数字光学顾问”,听起来可能有点抽象,但说白了,就是让一个AI系统把光学领域的所有核心知识吃透,然后能稳稳当当地帮科研、工程和教学解决问题。 如果拿ChatGPT这类通用大模型