首页 游戏 软件 资讯 排行榜 专题
首页
科技数码
张璐团队深耕AI技术落地,实时数字人迈入亚秒级时代

张璐团队深耕AI技术落地,实时数字人迈入亚秒级时代

热心网友
11
转载
2026-03-17

近期,Soul App AI团队(Soul AI Lab)在创始人张璐的引领下,正式开源了实时数字人生成模型SoulX-FlashTalk——这是业内首个实现0.87秒亚秒级超低延迟、32fps高帧率,并支持超长视频稳定生成的14B参数量数字人模型。这一突破不仅刷新了实时数字人生成的技术边界,更标志着大模型在实际业务场景中的落地能力迈上新台阶。

谈到SoulX-FlashTalk的亮点,首先不得不提的是它在四个关键指标上的突破,这些突破重塑了实时互动体验的新标准。首要的是仅0.87秒的亚秒级延迟,这种即时交互的能力为用户带来了前所未有的体验。特别是在实时视频交流中,低延迟的重要性不言而喻。SoulX-FlashTalk通过全栈加速引擎的极致优化,成功将首帧视频输出的延时降至历史最低点,首次让14B级别的大模型数字人具备了即时反应能力,彻底消除了传统大模型生成的滞后感。无论是视频通话中的即时对答、直播间弹幕的秒级互动,还是智能客服的实时响应,均能实现自然流畅的深度对话。

深耕AI技术落地,Soul张璐带领团队推动实时数字人迈入亚秒级时代

不仅如此,SoulX-FlashTalk还以32fps的高帧率重新定义了"流畅"。尽管搭载了14B参数量的超大DiT模型,该系统仍能保持高效的推理吞吐量。这远超直播所需的25+FPS实时标准,确保每一帧画面都丝滑顺畅。同时,这也证明了经过深度加速优化后的大模型依然能够拥有极佳的运行效率,为未来的AI应用提供了无限可能。

面对数字人视频中最常见的问题——人物面部不一致或显著画质下降,SoulX-FlashTalk采用了独特的自纠正双向蒸馏技术来解决这些问题。引入多步回溯自纠正机制,模拟长序列生成的误差传播并进行实时修正,就像为AI装上了"实时校准器",主动恢复受损特征。这样不仅能保证超长视频的稳定清晰生成,还能从根本上压制身份漂移现象,确保主播的口型、面部细节和背景环境始终保持一致。

深耕AI技术落地,Soul张璐带领团队推动实时数字人迈入亚秒级时代

除此之外,SoulX-FlashTalk还突破了传统数字人仅能实现面部"对口型"的局限,带来了更加真实自然的全身肢体动态表现。不同于以往仅对面部进行局部重绘的方案,SoulX-FlashTalk支持音频驱动的全身动作生成,可产生真实自然的人体动态。基于14B DiT的强大建模能力,系统能够有效消除手部畸形与运动模糊,精准呈现结构清晰、纹理锐利的手部动作细节。这样的设计既增加了视觉的真实感,也提升了用户的沉浸体验。

为了平衡生成质量与推理速度,SoulX-FlashTalk团队采取了一系列创新措施,包括两阶段训练策略和一系列针对硬件优化的技术手段。这些努力不仅提高了模型的性能,也为实际业务场景的应用打下了坚实的基础。

深耕AI技术落地,Soul张璐带领团队推动实时数字人迈入亚秒级时代

随着SoulX-FlashTalk的开源,它有望在电商、短视频制作、AI教育等多个领域创造巨大价值,推动行业的进一步发展。Soul在创始人张璐的带领下聚焦AI能力的建设,打造真正可用、好用、值得信赖的生成式系统,携手行业伙伴共同开拓实时数字人商业化的新疆界。

来源:https://news.zol.com.cn/1149/11497431.html
免责声明: 游乐网为非赢利性网站,所展示的游戏/软件/文章内容均来自于互联网或第三方用户上传分享,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系youleyoucom@outlook.com。

最新APP

宝宝过生日
宝宝过生日
应用辅助 04-07
台球世界
台球世界
体育竞技 04-07
解绳子
解绳子
休闲益智 04-07
骑兵冲突
骑兵冲突
棋牌策略 04-07
三国真龙传
三国真龙传
角色扮演 04-07

热门推荐

斯柯达晶锐Fabia Motorsport特别版车型正式发布
业界动态
斯柯达晶锐Fabia Motorsport特别版车型正式发布

为庆祝品牌投身赛车运动整整125年,斯柯达正式推出了晶锐Fabia Motorsport Edition特别版。这款车基于Fabia 130打造,设计灵感直接来源于征战赛场的Fabia RS Rally2拉力赛车,整体风格充满了对赛事历史的致敬意味。不过,得先说明白,它的升级重点主要落在了外观和底盘

热心网友
05.18
灰度以太坊质押ETF持仓超10万枚ETH 价值2.37亿美元
web3.0
灰度以太坊质押ETF持仓超10万枚ETH 价值2.37亿美元

Grayscale 通过其以太坊质押 ETF 质押了 102,400 个 ETH,价值 2 37 亿美元 先来看一组数据:资产管理巨头 Grayscale 最近通过其以太坊质押 ETF,一口气质押了超过10万个 ETH,价值约2 37亿美元。这个动作本身不小,但更有意思的是市场的后续反应——或者说,

热心网友
05.18
劳斯莱斯库里南防弹版发布 Inkas打造隐形防护座驾
业界动态
劳斯莱斯库里南防弹版发布 Inkas打造隐形防护座驾

劳斯莱斯库里南自问世以来,始终是超豪华全尺寸SUV领域的标杆。对于追求极致安全又不愿牺牲低调气质的高净值人士而言,如何实现“隐形”的顶级防护,一直是核心诉求。如今,加拿大专业防弹车制造商Inkas,以一款近乎“零痕迹”改装的库里南,给出了完美解决方案——一座移动的“隐形堡垒”。 区别于常见的外露装甲

热心网友
05.18
GTA5与荒野大镖客2高清复刻版或将登陆Switch平台
游戏资讯
GTA5与荒野大镖客2高清复刻版或将登陆Switch平台

新加坡维塔士工作室正考虑将《侠盗猎车手V》与《荒野大镖客:救赎2》移植至任天堂Switch平台。该团队拥有丰富的移植经验,曾成功负责多款游戏的跨平台适配。这两款作品全球销量巨大,若能登陆Switch,其便携特性可能成为新的市场增长点。

热心网友
05.18
大众ID. Polo GTI全球首发亮相 高尔夫GTI刷新纽北赛道纪录
业界动态
大众ID. Polo GTI全球首发亮相 高尔夫GTI刷新纽北赛道纪录

当高尔夫GTI迎来五十周年里程碑,传奇的纽博格林北环赛道成为其致敬历史与展望未来的最佳舞台。这里不仅铭刻了燃油性能图腾的巅峰时刻,也正式开启了电动GTI的新纪元。近日,大众汽车正式宣布,高尔夫GTI 50周年版在纽北创下全新纪录,荣膺最快前驱量产车称号;与此同时,品牌首款纯电动GTI车型——ID

热心网友
05.18