游乐游手机版
首页/科技数码/文章详情

云知声山海·知音2.0发布:多模态AI交互新纪元开启

时间:2026-01-26 09:55
1月26日消息,云知声今天迎来了“山海·知音”2 0的发布,正在完成“一基两翼”技术战略升级的能力拼图。“山海·知音”大模型 2 0——依托“山海·Atlas”的多模态、跨语言基座能力,让“山海·知

1月26日,云知声正式发布了“山海·知音”2.0版本,标志着其在“一基两翼”技术战略升级上的能力版图已基本构建完成。

“山海·知音”大模型2.0——依托“山海·Atlas”的强大底座能力,实现了跨语言与多模态的深度融合,进而推动了“山海·知医”等垂直领域专业智能体的效能升级,旨在将智能语音技术惠及千家万户。具体而言,本次升级聚焦于三大能力的进化:精准听懂专业术语与乡音方言、流畅对话中蕴含人情温度、以及实现极致的低延迟实时响应。

听懂专业与乡音——ASR能力全景升级

此次模型升级在ASR(自动语音识别)能力上表现卓越。无论是在公开测试集,还是在自有全场景测试集中,其语音识别能力均处于行业领先地位。评测结果显示,该模型实现了从通用场景到复杂极端场景的全面领先,性能超越了国内外主流的开源及闭源语音大模型,达到了当前业界的最高水平。

特别是在高难度的复杂噪音与方言口音混合场景下,其性能相比主流ASR模型提升了2.5%至3.6%,而在复杂背景噪音环境下的识别准确率,更是业内首次突破90%大关。

公有测试集表现

随着人工智能时代的全面到来,云知声基于“山海·Atlas”通用智能计算底座的持续演进来推进基础能力革新。继年前完成“山海·知医”5.0医疗大模型的升级后,今日又迎来了“山海·知音”2.0的重磅发布,从而完成了“一基两翼”技术战略升级的整体能力拼图构建。

自有测试集表现

“山海·知音”大模型2.0——依托“山海·Atlas”的强大底座能力,实现了跨语言与多模态的深度融合,进而推动了“山海·知医”等垂直领域专业智能体的效能升级,旨在将智能语音技术惠及千家万户。具体而言,本次升级聚焦于三大能力的进化:精准听懂专业术语与乡音方言、流畅对话中蕴含人情温度、以及实现极致的低延迟实时响应。

听懂专业与乡音——ASR能力全景升级

此次模型升级在ASR(自动语音识别)能力上表现卓越。无论是在公开测试集,还是在自有全场景测试集中,其语音识别能力均处于行业领先地位。评测结果显示,该模型实现了从通用场景到复杂极端场景的全面领先,性能超越了国内外主流的开源及闭源语音大模型,达到了当前业界的最高水平。

特别是在高难度的复杂噪音与方言口音混合场景下,其性能相比主流ASR模型提升了2.5%至3.6%,而在复杂背景噪音环境下的识别准确率,更是业内首次突破90%大关。

聊出亲情与温度——TTS能力声动进化

如果说ASR能力是机器的“耳朵”,那么TTS(语音合成)能力便是其“嘴巴”。“山海·知音”TTS以“高度拟人化与创意多元化”为核心,让合成语音同时兼具真实感与创造力,赋予科技以温度。它目前支持12种方言及10种外语,无论是清晰人声、爽朗笑声,还是细微的呼吸声,都能自然还原,甚至可以在12种不同的普通话风格间自如切换——温婉、干练、亲切,风格任你挑选。“科技不该高高在上,而该用你最舒适的方式与你对话。”

基于大模型的语音合成技术,传统上常采用流匹配方式,将大语言模型预测的语音标记转换为梅尔谱,再通过神经声码器重建成最终语音。但该方案普遍存在延迟较高的问题。

因果注意力机制图示

业界通常采用流匹配分段处理的方式来降低延迟,但效果有限,且容易牺牲音质。为实现真正高质量、低延迟的流式语音生成,云知声创新性地设计了基于纯因果注意力机制的流匹配模块,并与神经声码器进行联合优化,构建出端到端的纯流式推理架构。该方案在不损失语音合成质量的前提下,显著降低了系统延迟——在低并发场景下,首包延迟已压缩至90毫秒以内,达到了业界领先的实时交互水平。

极致机敏反应——端到端全双工自然交互

真正智能的交互,关键在于“听懂语境、感受情绪、并作出自然回应”。端到端模型实现流畅全双工对话的核心挑战在于:需要在流式收声的同时,同步完成语义理解、决策与内容生成,而且能在任意打断瞬间保持对话状态的连贯性。

“山海·知音”2.0基于其端到端交互大脑设计,成功攻克了这一难题,将全双工交互能力提升至新高度。它支持随时打断、即时接话和连贯追问,如同与一位真正的朋友聊天,对话如行云流水般顺畅,毫无卡顿之感。“这不只是问答,更是一场真正的对话。”

这一切卓越能力的背后,是云知声独创的“山海·Atlas”智算一体基座在提供核心支撑。它将通用多模态大模型底座能力与Atlas基础架构进行了深度整合,既是垂直领域专业智能体的坚实基础,也是构建感知AI中枢的根基——将传统的ASR、TTS识别合成能力与全双工交互能力,高效整合进端到端的大模型中,从而实现了传统模块化联动难以企及的极致交互体验与系统效率。

智启山海,知音万物。从专业手术室到乡村小路,从智能座舱到长者床头,云知声始终坚信:真正的智能,不在于炫技,而在于融入生活本身。“山海·知音”2.0,让AI不再是冰冷机器,而是能听清、说真、懂人心的温暖伙伴。这一次,AI终于学会了好好说话。

来源:https://www.donews.com/news/detail/1/6396301.html
上一篇阶跃星辰B+轮融资超50亿元,印奇出任董事长 下一篇搜狗输入法iOS 20.0.0发布:AI全面升级,一键关闭全场景广告
本站内容用于信息整理与展示,如有侵权或内容问题请及时联系处理。

相关推荐

补充同频道和同主题内容,方便继续浏览更多相关内容。

同类最新

继续查看同栏目最近更新的文章。

更多
酷态科电能仓600开启预约同时充7台设备首发1299元
科技数码 · 2026-07-01

酷态科电能仓600开启预约同时充7台设备首发1299元

酷态科在户外电源市场又带来了一款重磅新品——电能仓600,今天(7月1日)上午官方微博正式宣布开启预约,7月7日上午10点开售。这款产品的定价相当有竞争力:日常价1399元,首发直接优惠至1299元。 先聊聊它的核心参数:额定功率600W,但支持升维驱动至1000W。这是什么意思呢?像热水壶、养生壶

倍思四款旗舰降噪耳机搭载中科蓝讯BT8972H上市
科技数码 · 2026-07-01

倍思四款旗舰降噪耳机搭载中科蓝讯BT8972H上市

近年来,主动降噪(ANC)与AI通话降噪(ENC)已成为TWS耳机的核心功能,消费者对耳机的期待也在持续攀升——既要通勤时的安静沉浸,又要通话时的清晰无扰。不过,真正将这两项性能打磨至行业顶尖水准的,往往取决于底层芯片的实力。中科蓝讯最新推出的BT8972H音频平台芯片,在ANC主动降噪和ENC通话

中科蓝讯BT8972H助力倍思四款旗舰降噪耳机上市
科技数码 · 2026-07-01

中科蓝讯BT8972H助力倍思四款旗舰降噪耳机上市

如今,主动降噪与AI通话降噪已成为TWS耳机市场的核心竞争领域。消费者对半入耳式和入耳式耳机在降噪、通透模式及高清通话方面的需求持续攀升,这对芯片方案的性能提出了更高要求。在此背景下,中科蓝讯推出全新一代BT8972H音频平台芯片,在ANC主动降噪与ENC环境降噪两大核心功能上实现了突破性升级。凭借

三星Galaxy Glasses功能曝光 手势控制多设备联动
科技数码 · 2026-07-01

三星Galaxy Glasses功能曝光 手势控制多设备联动

三星的下一代智能穿戴设备——Galaxy Glasses,近期因配套应用及演示内容曝光,再度向外界揭示了大量硬核细节。此次泄露的信息显示,这款智能眼镜并非孤立硬件,而是三星联手谷歌、Warby Parker以及Gentle Monster共同打造的成果,搭载Android XR平台,并运行三星自家的

AI助推网络攻击工具 苹果提前发布iOS安全更新
科技数码 · 2026-07-01

AI助推网络攻击工具 苹果提前发布iOS安全更新

据路透社今日凌晨报道,苹果公司在安全策略上做出了一项关键调整:为应对由AI加速开发的网络攻击工具所引发的安全风险,苹果决定将部分原本计划随新版iOS系统一同推送的更新,提前向所有用户开放。 苹果官方给出的解释是,当前人工智能技术已能够显著提升恶意攻击工具的开发效率,因此安全更新从发布到抵达用户设备的