当视频逐步成为人工智能系统中的核心数据形态,视频处理本身也在经历一场深刻的重新定义。
一方面,视频分辨率持续攀升,从4K迈向8K,多路视频流的并行处理已成为常态;另一方面,视频不再仅仅服务于“观看”需求——它越来越多地被用于智能分析、实时决策乃至模型训练。这意味着,视频处理早已超越单纯编解码的范畴,演变为一套涵盖性能、带宽、存储与实时性的系统性约束条件。
因此,一个更具现实意义的问题浮出水面:在AI时代,究竟需要怎样的VPU(视频处理单元)?
近期,安谋科技(Arm China)正式发布了新一代“玲珑”V560/V760 VPU IP(代号“峨眉”),从底层架构到处理能力均实现了全面进化。该产品采用多核多格式编解码融合的可编程处理架构,单核即可支持4K 60FPS编码或8K 30FPS解码,同时集成CAE(内容感知编码)技术,全面兼容H.266等主流视频标准。

这款VPU IP主要面向边缘AI、云端AI以及物理AI应用场景,目前已完成首批客户授权,预计搭载该IP的客户产品将于今年陆续实现量产。
AI时代催生的“六边形战士”VPU
相较于传统视频应用,AI场景对VPU的性能要求上升到了全新高度。
首先,处理能力的需求发生了根本性转变。过去,单路视频的清晰播放或录制即可满足需求;但在云端转码、自动驾驶、多摄像头感知等场景中,多路视频流的并行处理已成为标配。这要求VPU不仅具备强劲的单核性能,还必须拥有出色的多核扩展能力。
其次,效率问题日益凸显。随着视频数据规模的急剧膨胀,码率不再仅仅是影响画质的参数,它直接关联到带宽占用与存储成本。在云端部署场景中,这部分开销甚至可能成为长期运营的主要成本来源之一。
与此同时,实时性要求也在持续提升。从视频会议到云游戏,再到需要即时反馈的AI应用,延迟已不再是可随意容忍的“附加问题”,而是直接影响用户体验、乃至系统决策结果的关键因素。
此外,应用场景的分化也愈发明显——从端侧设备到云端系统,从消费电子到自动驾驶与机器人,VPU必须具备足够的灵活性,不能沦为“死功能块”,而应能适配不同系统对性能、功耗与功能的差异化需求。

安谋科技Arm China VPU产品总监汪奕磊对此给出了明确判断:“在AI与视频相互赋能的当下,视频处理正面临前所未有的机遇与挑战。我们推出的‘玲珑’V560/V760是面向AI应用的新一代VPU IP,能为AI时代的各类视频应用提供强大核芯,全面覆盖云、边、端全场景。”
从实际表现来看,“玲珑”V560/V760确实堪称“六边形战士”——在性能、低延时、高鲁棒性、多OS支持、高质量低码率、信息安全六大维度上几乎没有明显短板。

性能层面,V560/V760单核即可支持4K 60FPS编码与8K 30FPS解码,相比上一代产品,单核解码性能直接翻倍,同时多核并行处理能力也极为出色。安谋科技现场展示了8K解码效果:在高性能开发板上,基于V560/V760的实时硬件解码,8K 30FPS超高清视频播放流畅无卡顿;在运动相机场景中,实时拍摄与成片效果均能做到每一帧稳定、不丢帧、无延迟。

在实时处理方面,得益于安谋科技独有的条带级编解码控制技术,通过更细粒度的控制缩短处理链路,V560/V760显著降低了编解码延迟,同时控制精度也更为灵活。
鲁棒性在实际应用中的价值同样不可忽视。V560/V760具备强大的错误处理能力,即使在丢包率高达20%的极端条件下,依然能够实现纠错解码。
全新一代玲珑VPU还有一个关键变化,即对编码效率的深度优化。
通过引入CAE(内容感知编码)技术,“玲珑”V560/V760在编码过程中融入了轻量化的内容分析能力,能够对画面中的关键区域与非关键区域进行差异化处理。这种方式不再仅仅是对像素数据进行简单压缩,而是基于内容语义进行更有针对性的码率分配。

安谋科技在发布会现场也演示了CAE编码的实际效果。在CAE技术的加持下,前处理阶段可以智能识别出需要重点关注的敏感对象;在同等视频码率下,编码质量平均提升20%;在同等编码质量下,视频码率平均降低20%,特定场景下码率最大可降低80%。

对于需要长期处理和存储视频数据的系统而言,这种优化直接转化为带宽与存储成本的有效下降,其战略意义不言而喻。
积木式堆叠技术,满足从云到端的AI视频处理需求
高性能、低延时、高鲁棒性、高质量低码率,这些特性更多是在解决“处理过程”中的核心问题。而多OS支持与信息安全,则决定了VPU能否真正适配各类AI应用场景。
“玲珑”V560/V760在这一代引入了一个核心设计理念——“积木式堆叠”。

安谋科技Arm China VPU研发总监黄鑫对此给出了形象的解释:“‘玲珑’V560/V760的核心优势在于采用灵活可配置架构,并融合积木式堆叠研发特色。这一设计对于高度碎片化的多媒体技术市场尤为重要,能够支持客户按需配置、敏捷创新。”
简而言之,积木式堆叠技术让客户无需重复开发底层基础,即可根据具体场景按需配置模块,充分满足多领域、多场景的应用需求,从而大幅缩短新品研发周期,加速产品上市进程。这意味着,在不同应用场景中,用户不再需要围绕一套固定能力做取舍,而是可以在性能、功耗与芯片面积之间实现更灵活的平衡。
不同场景对性能、功耗、面积的需求差异极大:端侧设备更关注功耗与面积约束;在自动驾驶或机器人系统中,多OS运行与安全隔离能力至关重要;而在云端场景中,则更强调吞吐能力与长期运行成本。得益于“玲珑”V560/V760的灵活可配置架构,以及创新的多核处理架构,它能够支持多核同任务与多核异任务,满足多样化场景需求。
多OS支持与安全特性同样关键。“玲珑”V560/V760支持Linux、Android、Windows及RTOS在内的多种操作系统,并能运行在多OS与虚拟化环境中,同时支持TrustZone内容保护。高级Mosaic功能还提供了完善的隐私保护机制。这种多配置全隔离的硬件运行方式,能够满足复杂应用环境对安全性的严苛要求。
值得强调的是,“玲珑”V560/V760全面覆盖了H.266等主流编解码标准,集成了多格式视频编解码器,无论是H.266还是其他主流标准,都能从容应对。

黄鑫进一步表示:“为应对不断推陈出新的AI技术与新兴场景,未来‘玲珑’VPU架构将朝着AI端到端视频编码技术路径加速演进,逐步构建起‘深度感知、全局最优’的AI VPU训练框架,服务于更广泛的‘AI+视频’应用场景。”

作为“六边形战士”,“玲珑”V560/V760 VPU IP足以满足云、边、端全场景对视频处理“高效率、高质量、低能耗”的核心诉求。
例如,在手持摄像设备、智能手机、Pad、AI PC、TV、边缘服务器、线上会议等边缘应用场景中,它在确保系统高效运行的同时,能够显著降低功耗与芯片面积,大幅降低视频码率与处理延迟,实现用户体验、电池续航与芯片成本的最佳平衡。
在数据中心、视频转码、AI服务器、云游戏等云端应用中,它能在保证数据准确性的前提下,实现高性能、高编码质量、高吞吐量、低延迟的视频处理。
而针对物理AI场景,如智能驾驶、智能座舱、机器人等,它支持多OS/虚拟化应用,增强了系统集成的灵活性与安全性,降低了跨平台、多应用的开发集成成本与风险。
当视频成为AI系统的主要输入之一,问题就不再仅仅是“能不能处理”,而是“能以多高的效率来处理”。算力之外,带宽、存储与延迟正在构成新的约束条件,也让视频处理从一个功能模块,升维为系统设计中的关键变量。
从这个角度来看,“玲珑”V560/V760的意义,不仅是一次VPU产品的迭代升级,更是为AI时代的视频处理提供了强有力的技术支撑。
