游乐游手机版
首页/AI热点日报/热点详情

NPU是什么?为何它是开启终端侧生成式AI的关键

类型:热点整理2026-07-22
生成式AI对计算性能、功耗和实时性提出新要求,以神经网络处理器(NPU)为核心的CPU、GPU异构计算成为关键。NPU专为AI推理优化,与CPU、GPU协同工作,实现高效低功耗。高通HexagonNPU及AI引擎提供从芯片到软件的完整方案,推动终端侧生成式AI规模化。

生成式AI时代,为何需要全新的计算架构?

随着生成式AI在医疗、教育、设计等垂直领域的应用持续普及,不同类型场景对计算性能、功耗以及实时性提出了多样化的需求。传统的通用处理器已经难以高效满足这些要求。因此,我们亟需专为AI定制设计的全新计算架构——以神经网络处理器(NPU)为核心,同时结合中央处理器(CPU)和图形处理器(GPU)的异构计算方案,才能充分释放生成式AI的潜力,实现最佳性能、能效与电池续航表现。

异构计算:让“对的人”做“对的事”

生成式AI的工作负载涵盖顺序控制、并行数据流、标量/向量/张量运算等多种类型,单一处理器无法高效应对所有任务。异构计算架构通过将任务合理分配至不同处理器,实现1+1>2的效果:

  • CPU(中央处理器):擅长顺序控制和即时性响应,适合处理系统调度、逻辑判断等任务。
  • GPU(图形处理器):擅长并行数据流处理,适合图像渲染、大规模矩阵运算。
  • NPU(神经网络处理器):专为AI推理设计,擅长标量、向量和张量数学运算,是核心AI工作负载的最佳选择。

通过异构计算,每个处理器各司其职,从而实现最佳应用性能、能效和电池续航,为用户提供流畅、持久的生成式AI体验。

来源:https://m.elecfans.com/article/2447569.html

相关热点

继续查看同栏目近期热点。

延伸阅读

补充最近整理过的热点入口。