回顾 MiniMax Music 从 1.0 到 2.0 的演进历程,这绝非一次常规版本升级,而是在底层架构与能力边界上实现了实质性跃迁。MiniMax Music 2.0 一口气带来了五大核心能力提升:架构上转向 MOE+Linear Attention 混合范式,显著降低计算复杂度的同时增强了时序连贯性;能够识别歌曲段落并生成分轨 WAV 文件;引入声学建模后,音色真实感与空间深度实现质的飞跃;支持文本、MIDI、哼唱等跨模态输入;甚至还推出了面向端侧的 Edge 版本。以下是对这一关键迭代的具体呈现。

一、架构范式重构:从单体模型到MOE+Linear Attention混合架构
Music 2.0 此次直接对生成架构进行了彻底革新,不再沿用上一代的传统 Transformer,转而采用混合专家(MOE)与线性注意力(Linear Attention)协同工作的新范式。这一设计的直接优势在于:长序列建模的计算成本得到有效控制,同时不同音乐段落之间的时序连贯性和风格一致性均获得显著提升。
具体来看,MOE 模块通过动态路由机制,在生成不同乐器声部或音乐段落时自动激活最合适的专家子网络,资源分配变得极其高效。线性注意力则替代了标准自注意力机制,计算复杂度从 O(n²) 直接降至 O(n),使得 3 分钟以上纯音乐生成的延迟降低了 67%。两个模块共享统一的音高-时值联合嵌入空间,确保和声进行与节奏骨架在同一个语义坐标系中对齐。
二、功能维度扩展:从片段生成到结构化创作支持
上一代产品 Music 1.0 的输出范围仅限于固定时长的音频片段,对音乐工程的逻辑基本没有理解。而 Music 2.0 内置了歌曲结构解析器,能够识别主歌、预副歌、副歌、桥段等专业标记,并依据这些标记规划多轨音频的生成流程。
举例来说,如果输入文本提示中包含“[verse]”“[chorus]”等标签,模型会自动调用对应的段落生成策略。面对清唱作品生成任务时,系统会优先构建人声基频轨迹,再反向推导伴奏的和声走向。导出文件时默认提供分轨 WAV 包,内含主唱、和声、钢琴、弦乐、鼓组五条独立音轨,支持DAW软件直接导入编辑。
三、音质保真突破:从合成感音频到物理级声学建模
Music 2.0 首次在频谱生成阶段嵌入物理声学约束层,融入了乐器共振峰分布先验和房间混响衰减模型。这使得输出音频具备真实录音才有的泛音结构和空间深度,彻底摆脱了以往明显的合成感。
钢琴音色生成启用了弦槌击弦动力学模拟,低音区延音衰减时间误差控制在 ±8ms 以内。弦乐组生成时则注入了弓速与压力耦合参数,颤音幅度随运弓速度呈现非线性正相关关系。所有输出音频均经过AES-2024标准监听环境校准,无论是在 Neumann KH120 还是 Sony MDR-7506 上播放,听感都能保持高度一致。
四、交互方式革新:从单点指令到多模态创作引导
在交互层面,Music 2.0 开放平台现已支持文本、MIDI 片段、哼唱音频三种输入模态的任意组合。系统通过跨模态对齐网络,将这些异构信号映射到统一的音乐语义空间中,从而更精准地解码创作者的意图。
例如,上传一段 12 小节的吉他即兴演奏 MIDI,模型能自动提取调性、节奏型与动机发展逻辑。再叠加一条“转换为大提琴二重奏,加入巴洛克装饰音”的文本指令,它就能触发风格迁移和声部重编排。甚至录制 15 秒清唱音频,然后补充“强化呼吸气声质感,副歌升 Key 半音”的要求,系统也能针对性地优化人声频谱包络和音高曲线。
五、工程部署升级:从云端API到端侧轻量化推理
Music 2.0 在保持专业能力的同时完成了模型蒸馏,此次直接推出了可离线运行的 Edge 版本。在搭载 NPU 的移动设备上,该版本能实现 200ms 级别的实时生成响应,AI 音乐创作不再依赖网络连接。
背后的关键工程改进包括:通过 MOE 稀疏激活剪枝技术,参数量压缩至原模型的 38%,推理时显存占用降至 1.2GB。Android 端集成了 MediaPipe 音频预处理流水线,支持 48kHz 采样率实时流式输入。iOS 设备上则启用了 Core ML 加速框架,生成一首60秒的纯音乐,耗时稳定在3.2秒以内。
