Liquid AI 是一家成立于2024年的初创公司,由麻省理工学院的计算机科学家创办。2025年7月,该公司发布了 Liquid Foundation Models 系列的第二代产品(LFM2),旨在利用全新的“liquid”架构提供市场上最快的设备端基础模型。其卓越的训练和推理效率使小型模型能够成为云端大型语言模型(例如 OpenAI 的 GPT 系列和谷歌的 Gemini)的有力竞争者。
LFM2 最初推出了350M、700M 和1.2B 参数的密集检查点,采用了一种偏向门控短卷积的混合架构。基准测试结果显示,LFM2 在质量和 CPU 吞吐量上均优于 Qwen3、Llama3.2 和 Gemma3 等同类竞争对手。对于企业而言,这一系列模型实现了在手机、笔记本电脑和车辆等设备上实时且隐私保护的 AI 应用,无需在性能与延迟之间进行取舍。
在 LFM2 发布后,Liquid AI 进一步拓展了产品线,增加了任务和领域特定的变体、小型视频摄取和分析模型,以及一个名为 LEAP 的边缘部署栈。目前,该公司在 arXiv 上发布了一份详细的51页 LFM2 技术报告,公开了模型背后的架构搜索过程、训练数据混合、蒸馏目标、课程策略和后训练流程。这份蓝图的发布将为其他组织提供参考,使其能够从零开始训练适合自身硬件和部署约束的小型高效模型。
LFM2 的设计始终围绕现实中的企业需求,例如延迟预算、内存上限和热阈值,确保在各种设备上都能稳定运行。报告还强调了其优化的训练管道,旨在实现更可靠的指令执行和工具使用行为,使得 LFM2 模型在实际应用中更具实用性。
划重点:
