
12月25日,昇思人工智能框架峰会在杭州召开。本次大会以“昇思MindSpore:为超节点而生的AI框架”为主题。会上,昇思MindSpore聚焦超节点技术创新,打造昇思HyperParallel架构,加速新模型结构和新训推范式创新,引领AI框架迈入“超节点时代”。
华为中央软件院总裁谢桂磊在致辞中表示,人工智能发展浪潮奔涌向前,昇思MindSpore致力于打造超节点亲和、全场景融合、架构开放、敏捷使能的人工智能框架,以更前沿的技术、更易用的体验、更开放的社区,助力千行万业智能化转型。
据介绍,华为于2020年3月28日开源昇思MindSpore AI框架。开源后获得国内外开发者的积极响应,下载量超过1300万,覆盖全球156个国家和地区,拥有超过12万个合入请求,社区贡献者超过5.2万。该框架支持25个以上系列大模型,与2000多个社区合作伙伴协作,支撑3100多个行业应用实践,支持近2500个学术论文创新。在所有AI框架排名中,昇思位列中国第一、全球第二,昇思也成为国内最具创新活力的AI框架开源社区。
人工智能大模型技术飞速发展,模型规模走向长序列和稀疏的十万亿级,模型结构走向非规则化,训推范式走向异构化。模型发展驱动AI基础设施从“服务器集群时代”迈入“超节点时代”。AI框架作为产业智能化的核心基石,正面临新的挑战和机遇。
昇思MindSpore开源社区技术委员会主席金雪锋在演讲中指出,昇思HyperParallel架构将超节点视为一台“超级计算机”进行编程和调度,充分发挥超节点架构优势,实现HyperShard声明式并行编程、HyperMPMD异构非规则并行、HyperOffload多级智能卸载等特性,加速Agentic AI、全模态等新模型结构和训推范式创新。
昇思MindSpore开源社区理事长王紫东接受澎湃新闻记者采访时表示:“昇思这一次相当于比较高调地提出:我们就是为超节点而生的AI框架。”
王紫东解释称,超节点就是把一些基础的NPU的AI算力用超高的互联带宽把它连起来,卡间通讯会变得非常快。各个网络之间都是互联互通的,这导致通信变得很复杂。硬件设计已经比较好了,这个时候就是所谓的“为超节点而生”的AI框架发挥作用的时候了。昇思框架的作用就是把资源利用率提上来,这是我们在训练大模型或者实际AI应用中一个非常关键的问题。
王紫东表示,相对于其他AI框架,昇思框架的优势是整个任务的调度效率会变得比较高。昇思有一套技术,让客户和我们的用户专注于算法的创新和模型的效果调试。
