游乐游手机版
首页/AI热点日报/热点详情

美团发布原生多模态模型LongCat-Next开源离散分词器探索AI新边界

类型:热点整理2026-07-06
美团发布开源原生多模态模型LongCat-Next及离散分词器,将视觉与语音视为AI母语,实现物理世界感知、理解与交互。该模型旨在降低多模态系统开发门槛,推动智能配送、机器人等具身智能场景应用。

美团技术团队近期正式发布了其原生多模态大模型 LongCat-Next,并同步开源了核心组件——离散分词器。该模型的核心理念在于,让视觉与语音真正成为人工智能的“母语”,而非像以往那样依赖外部编码器做翻译桥接。可以说,这是美团在物理世界人工智能方向上一次关键的战略布局。通过全面开源,美团期望助力更多开发者构建能够感知、理解乃至直接作用于现实环境的智能系统,推动多模态技术从理论研究走向实际应用。

核心要点

  • 原生多模态架构:LongCat-Next 强调对视觉和语音信号的原生处理,使其被 AI 视为“母语”,而非事后拼接的外部插件。
  • 全栈开源:美团不仅开源了 LongCat-Next 模型本身,还同步公开了其底层离散分词器(Discrete Tokenizer),代码与设计思路一并开放。
  • 物理世界导向:该模型的构建目标直指“物理世界 AI”,核心在于对真实环境的感知、理解与交互,而非局限于数字屏幕内容。
  • 赋能开发者:通过开源研究方法和工具,旨在降低构建复杂多模态感知系统的门槛,让更多团队能够参与创新。

详细分析

从“插件”到“母语”:原生多模态的范式转移

以往的主流做法是将视觉和语音视为文本的辅助信息,通过外部编码器实现特征对齐。LongCat-Next 则提出一个全新思路:让这些模态直接成为 AI 的母语。这意味着,从底层架构设计之初,模型就对不同模态的信息进行天然统一的处理。通过将非结构化的视觉和语音信号转化为模型可直接理解的原生表征,LongCat-Next 能够更直观地捕捉物理世界中错综复杂的关联。这种原生化的处理方式,不仅提升了信息传递的效率,更在深度理解层面实现了质的飞跃——它使 AI 的感知逻辑更贴近人类感官的自然方式,而不再是生硬的数据对齐。

离散分词器:连接数字逻辑与物理信号的关键桥梁

本次开源的另一个核心亮点是 LongCat-Next 的离散分词器。在人工智能模型中,如何将连续的物理信号(如波动的声音、流动的影像)转化为计算机可处理的离散符号,一直是多模态理解的难点。这个分词器就像一把钥匙,高效地将复杂的视觉和语音数据压缩并提取特征,转化为模型能够理解的“词汇”。美团技术团队通过开源这一组件,向业界展示了他们处理物理信号的独特技术路径。这一工具的开源,不仅有助于开发者复现 LongCat-Next 的能力,更为整个行业在处理非文本数据时提供了标准化的技术参考,是通向物理世界 AI 的一块重要技术基石。

物理世界 AI:迈向具身智能的探索之路

美团明确表示,LongCat-Next 是其在“物理世界 AI”方向上的重要探索。与那些只能在屏幕上聊天的机器人不同,物理世界 AI 需要具备感知真实环境、理解物理规律并产生实际作用的能力。美团自身拥有大量线下场景——自动配送车、智能硬件等——因此 LongCat-Next 的推出显然不只是为了对话,而是要让 AI 实实在在地在马路上、仓库里执行任务。通过增强 AI 对视觉和语音的原生感知,模型能够更准确地识别障碍物、理解语音指令背后蕴含的环境语境,从而为未来的具身智能和自动化设备提供更强大的认知中枢。

行业影响

LongCat-Next 的开源对人工智能行业具有深远意义。首先,它推动多模态技术从“文本中心论”向“全感官原生化”转变,为行业树立了一个新范式。其次,美团通过开源核心组件,降低了中小团队开发物理感知 AI 的成本,有望加速智能硬件、机器人及自动化配送等领域的创新。最后,这也体现了中国互联网大厂在底层技术研发上的持续投入,增强了国产开源生态在多模态大模型领域的国际竞争力。

常见问题

问题 1:LongCat-Next 与普通的多模态模型有什么区别?

LongCat-Next 的核心区别在于“原生”二字。它不是简单地将视觉和语音模块挂载到语言模型上,而是通过离散分词器等底层设计,让模型把这些模态视为与文字同等的“母语”来处理。这样一来,它在感知和理解物理世界时更加自然和深层,而非依赖临时的翻译对齐。

问题 2:美团为什么要开源离散分词器?

离散分词器是多模态模型处理非文本数据的核心组件。美团开源这一工具,是为了分享他们在物理信号数字化方面的研究思路,帮助开发者解决多模态数据处理中的关键难点,共同构建能够作用于真实世界的人工智能生态。开放本身,就是为了吸引更多参与者加入共建。

问题 3:LongCat-Next 主要应用在哪些场景?

根据美团技术团队的描述,该模型主要面向需要感知、理解并作用于真实世界的场景。这包括但不限于智能配送机器人、语音交互设备、复杂环境下的视觉识别任务,以及任何需要 AI 与物理世界进行深度交互的领域。换句话说,只要设备需要“看懂”周围、“听懂”指令并“做出动作”,LongCat-Next 就能发挥作用。

来源:https://aitoolly.com/zh/ai-news/article/2026-06-13-meituan-open-sources-longcat-next-a-native-multimodal-model-for-physical-world-ai-perception

相关热点

继续查看同栏目近期热点。

延伸阅读

补充最近整理过的热点入口。