以色列人工智能公司 aiOla 最近在语音识别领域扔出了一枚重磅冲击波——他们开源了一款名为 Whisper Medusa 的新模型。根据官方数据,它的处理速度比 OpenAI 的 Whisper 模型快了整整50%。这个数字一出,业内自然没法忽视。
那么,这50%的速度提升是怎么做到的?关键在于架构层面的手术。aiOla 对 Whisper 原有的设计动了刀子,引入了多头注意力机制。简单来说,传统模型每次只能“读”一个字,而 Whisper Medusa 可以一次“读”十个。它通过并行使用多个注意力头,同时从不同的表示子空间捕捉信息,从而大幅缩短了语音预测和生成的运行时间。
最值得玩味的是,提速的同时并没有牺牲性能。这得益于它的主干系统仍然牢牢建立在 Whisper 的基础之上——底子扎实,准确性和稳定性就有了保障。而在训练环节,aiOla 采用了一种叫做弱监督的机器学习方法。具体操作是:先把 Whisper 的主要组件冻结住,然后用模型自己生成的音频转录作为标签,去训练那些额外的 token 预测模块。听起来有点绕,但实际效果是学习效率和准确率都上了一个台阶。
Whisper Medusa 选择开源发布,这对整个语音识别技术生态的影响可能比模型本身更大。它给研究人员和开发者提供了一个趁手的新工具,也让更快速、更高效的语音处理应用有了落地的可能。在语音交互需求越来越旺盛的当下,这项技术突破无疑为AI在语音识别领域的探索打开了新的门。
可以预见的是,随着 Whisper Medusa 的发布,接下来我们会看到大量基于它的创新应用——智能助手、实时翻译、语音控制系统,都可能因此迎来一波显著的性能提升。这不止是语音识别技术的一个里程碑,更是人机交互向更流畅、更自然方向迈进的重要一步。
