游乐游手机版
首页/科技数码/文章详情

云知声山海·知音2.0发布:多模态AI交互新纪元开启

时间:2026-01-26 09:55
1月26日消息,云知声今天迎来了“山海·知音”2 0的发布,正在完成“一基两翼”技术战略升级的能力拼图。“山海·知音”大模型 2 0——依托“山海·Atlas”的多模态、跨语言基座能力,让“山海·知

1月26日,云知声正式发布了“山海·知音”2.0版本,标志着其在“一基两翼”技术战略升级上的能力版图已基本构建完成。

“山海·知音”大模型2.0——依托“山海·Atlas”的强大底座能力,实现了跨语言与多模态的深度融合,进而推动了“山海·知医”等垂直领域专业智能体的效能升级,旨在将智能语音技术惠及千家万户。具体而言,本次升级聚焦于三大能力的进化:精准听懂专业术语与乡音方言、流畅对话中蕴含人情温度、以及实现极致的低延迟实时响应。

听懂专业与乡音——ASR能力全景升级

此次模型升级在ASR(自动语音识别)能力上表现卓越。无论是在公开测试集,还是在自有全场景测试集中,其语音识别能力均处于行业领先地位。评测结果显示,该模型实现了从通用场景到复杂极端场景的全面领先,性能超越了国内外主流的开源及闭源语音大模型,达到了当前业界的最高水平。

特别是在高难度的复杂噪音与方言口音混合场景下,其性能相比主流ASR模型提升了2.5%至3.6%,而在复杂背景噪音环境下的识别准确率,更是业内首次突破90%大关。

公有测试集表现

随着人工智能时代的全面到来,云知声基于“山海·Atlas”通用智能计算底座的持续演进来推进基础能力革新。继年前完成“山海·知医”5.0医疗大模型的升级后,今日又迎来了“山海·知音”2.0的重磅发布,从而完成了“一基两翼”技术战略升级的整体能力拼图构建。

自有测试集表现

“山海·知音”大模型2.0——依托“山海·Atlas”的强大底座能力,实现了跨语言与多模态的深度融合,进而推动了“山海·知医”等垂直领域专业智能体的效能升级,旨在将智能语音技术惠及千家万户。具体而言,本次升级聚焦于三大能力的进化:精准听懂专业术语与乡音方言、流畅对话中蕴含人情温度、以及实现极致的低延迟实时响应。

听懂专业与乡音——ASR能力全景升级

此次模型升级在ASR(自动语音识别)能力上表现卓越。无论是在公开测试集,还是在自有全场景测试集中,其语音识别能力均处于行业领先地位。评测结果显示,该模型实现了从通用场景到复杂极端场景的全面领先,性能超越了国内外主流的开源及闭源语音大模型,达到了当前业界的最高水平。

特别是在高难度的复杂噪音与方言口音混合场景下,其性能相比主流ASR模型提升了2.5%至3.6%,而在复杂背景噪音环境下的识别准确率,更是业内首次突破90%大关。

聊出亲情与温度——TTS能力声动进化

如果说ASR能力是机器的“耳朵”,那么TTS(语音合成)能力便是其“嘴巴”。“山海·知音”TTS以“高度拟人化与创意多元化”为核心,让合成语音同时兼具真实感与创造力,赋予科技以温度。它目前支持12种方言及10种外语,无论是清晰人声、爽朗笑声,还是细微的呼吸声,都能自然还原,甚至可以在12种不同的普通话风格间自如切换——温婉、干练、亲切,风格任你挑选。“科技不该高高在上,而该用你最舒适的方式与你对话。”

基于大模型的语音合成技术,传统上常采用流匹配方式,将大语言模型预测的语音标记转换为梅尔谱,再通过神经声码器重建成最终语音。但该方案普遍存在延迟较高的问题。

因果注意力机制图示

业界通常采用流匹配分段处理的方式来降低延迟,但效果有限,且容易牺牲音质。为实现真正高质量、低延迟的流式语音生成,云知声创新性地设计了基于纯因果注意力机制的流匹配模块,并与神经声码器进行联合优化,构建出端到端的纯流式推理架构。该方案在不损失语音合成质量的前提下,显著降低了系统延迟——在低并发场景下,首包延迟已压缩至90毫秒以内,达到了业界领先的实时交互水平。

极致机敏反应——端到端全双工自然交互

真正智能的交互,关键在于“听懂语境、感受情绪、并作出自然回应”。端到端模型实现流畅全双工对话的核心挑战在于:需要在流式收声的同时,同步完成语义理解、决策与内容生成,而且能在任意打断瞬间保持对话状态的连贯性。

“山海·知音”2.0基于其端到端交互大脑设计,成功攻克了这一难题,将全双工交互能力提升至新高度。它支持随时打断、即时接话和连贯追问,如同与一位真正的朋友聊天,对话如行云流水般顺畅,毫无卡顿之感。“这不只是问答,更是一场真正的对话。”

这一切卓越能力的背后,是云知声独创的“山海·Atlas”智算一体基座在提供核心支撑。它将通用多模态大模型底座能力与Atlas基础架构进行了深度整合,既是垂直领域专业智能体的坚实基础,也是构建感知AI中枢的根基——将传统的ASR、TTS识别合成能力与全双工交互能力,高效整合进端到端的大模型中,从而实现了传统模块化联动难以企及的极致交互体验与系统效率。

智启山海,知音万物。从专业手术室到乡村小路,从智能座舱到长者床头,云知声始终坚信:真正的智能,不在于炫技,而在于融入生活本身。“山海·知音”2.0,让AI不再是冰冷机器,而是能听清、说真、懂人心的温暖伙伴。这一次,AI终于学会了好好说话。

来源:https://www.donews.com/news/detail/1/6396301.html
上一篇阶跃星辰B+轮融资超50亿元,印奇出任董事长 下一篇搜狗输入法iOS 20.0.0发布:AI全面升级,一键关闭全场景广告
本站内容用于信息整理与展示,如有侵权或内容问题请及时联系处理。

相关推荐

补充同频道和同主题内容,方便继续浏览更多相关内容。

同类最新

继续查看同栏目最近更新的文章。

更多
2026中国航空产业大会10月底南昌启幕:首次与航博会同期举办,聚焦低空经济新路径
科技数码 · 2026-08-31

2026中国航空产业大会10月底南昌启幕:首次与航博会同期举办,聚焦低空经济新路径

2026中国航空产业大会与南昌航空产业博览会将于10月31日至11月4日在南昌国际博览城首次同期举办。大会聚焦低空经济,设置主旨报告、行业专家报告及低空产业洽谈会等主题活动,旨在探讨航空产业新路径,推动低空物流、城市巡检等新业态集聚,打造中部领先、全国知名的航空产业交流高地。

联想来酷Air 16酷睿5 315版开售:国补后3739元,16英寸轻薄本选购指南
科技数码 · 2026-08-28

联想来酷Air 16酷睿5 315版开售:国补后3739元,16英寸轻薄本选购指南

联想来酷Air 16酷睿5 315版于8月27日正式开售,搭载6核处理器与12GB内存,配备16英寸16:10屏幕。叠加国家补贴后预估到手价仅3739 15元,主打长续航与静音办公。本文详细解析其硬件配置、接口布局及购买建议,助您快速决策。

牛来AirPods保护套海外走红:萌趣硅胶设计引发关注
科技数码 · 2026-08-28

牛来AirPods保护套海外走红:萌趣硅胶设计引发关注

一款名为“牛来”的AirPods硅胶保护套在日本市场引发关注,售价约1726日元。其独特的搞怪萌趣造型、兼容多代机型的硅胶材质以及专属挂饰设计,使其在社交平台上迅速走红,成为近期备受瞩目的国产原创数码周边产品。

行李箱选购全攻略:材质、轮子与尺寸避坑指南
科技数码 · 2026-08-28

行李箱选购全攻略:材质、轮子与尺寸避坑指南

选购行李箱时,材质、轮子和尺寸是核心决策点。PP材质抗冲击且轻便,适合频繁托运;万向轮决定推行顺滑度;尺寸需匹配航空限重。本文拆解关键参数,结合具体产品案例,助您选出耐用且实用的行李箱。

《湮灭之潮》成都试玩会:技嘉RTX 5080风魔显卡实测体验
科技数码 · 2026-08-28

《湮灭之潮》成都试玩会:技嘉RTX 5080风魔显卡实测体验

2026年8月《湮灭之潮》成都试玩会圆满举行,千名玩家现场体验西方奇幻大作。文章重点解析技嘉RTX 5080风魔显卡在虚幻5引擎下的表现,涵盖Blackwell架构、DLSS 4 5技术及16GB GDDR7显存对高画质流畅运行的支撑作用。