6月5日消息,谷歌Magenta团队于昨日(6月4日)正式发布了Magenta RealTime 2(MRT2)模型,并同步免费推出两款实用工具:一款名为Jam的乐器应用,以及一款DAW插件MRT2。仅凭“免费”这一亮点,就已足够令音乐创作者们倍感惊喜。

MRT2定位非常明确——它是一个能够与你“即兴合奏”的本地实时音乐AI模型。目前提供两个版本:高质量模型mrt2_base,参数量达24亿;高速模型mrt2_small,参数量为2.3亿。谷歌特别强调,这两个版本均针对苹果Apple Silicon芯片进行了优化,尤其是mrt2_small,在搭载M1及后续芯片的Mac上即可实时运行,大大降低了使用门槛。
MRT2最显著的改进莫过于“低延迟”。上一代Magenta RealTime需要依赖TPU或高性能GPU,控制延迟约为3秒,且以2秒音频块为单位响应。而MRT2改为逐帧生成,每帧仅40毫秒,实际控制延迟压缩至约200毫秒——相比前代降低了整整15倍。这意味着,当你输入一个音符变化时,模型几乎能瞬间跟上,卡顿感和滞后感基本消失,演奏体验逼近真实乐器。
在控制方式上,MRT2比前代更加完备。它不仅支持文本和音频风格提示,还支持MIDI音符与鼓开关控制。模型能持续跟随你输入的音符变化,并在Auto-Strum模式下自动决定拨弦或起音的时机。若需更精细的控制,关闭该模式即可精确指定每个音符的起始时刻。对于鼓组,系统也支持切换有鼓或无鼓输出,在多轨编曲场景中非常实用。
技术层面,MRT2仍属于Codec Language Model(编解码器语言模型),基于SpectroStream音频编解码器处理48kHz立体声音频,并以25Hz的帧率生成音频标记。换言之,它在底层设计上就是为了实现实时交互而打造。
交互方面,谷歌推出的免费Jam应用颇具亮点。你只需输入想要的音乐风格描述,模型便会开始生成音乐,同时可通过下方的键盘调整音高。输入设备不限于鼠标点击,MacBook键盘和MIDI键盘均可直接使用,这种控制方式更接近传统电子乐器和数字编曲工作流。如果你已习惯在成熟的DAW环境中工作,MRT2插件则提供了完美的接入路径——在你常用的编曲软件中直接调用Magenta RealTime 2,实现无缝衔接。
