游乐游手机版
首页/科技数码/文章详情

京东开源JoyAI-Echo长音视频生成框架,声称全球第一梯队

时间:2026-06-04 13:10
京东推出JoyAI-Echo长音视频生成框架,解决角色不一致、音色突变和生成缓慢问题。内置记忆库保持长视频中角色与音色高度一致,结合SFT、跨模态RLHF和DMD技术实现7 5倍推理加速,并具备对话式编辑、DirectorAgent及实时超分模块,宣称进入全球第一梯队。

就在近日,京东放出一个重磅消息——正式推出名为 JoyAI-Echo 的长音视频生成框架。这款产品一上线,就直奔行业中最棘手的三大难题:角色容易崩坏、声音突变不稳定、以及生成速度如同龟速。此外,它还搭载了“对话式编辑”功能,意味着未来想要调整某个镜头,无需再把整条视频从头生成一遍。

京东官方表示,JoyAI-Echo 的发布,意味着他们在长视频生成领域已经迈入全球第一梯队。这句话听起来颇为自信,但从技术细节来看,确实有不少亮点。

该框架内置了一个专用的“记忆库”。在多镜头生成过程中,它能持续保留并调用角色的外观特征以及说话人的音色信息。实测显示,在长达5分钟的视频里,角色的身份、视觉形象、声音音色都能保持高度一致——再也不会出现同一个人演着演着突然变成另一个人的尴尬情况。

研发团队还提出了一种记忆驱动的后训练流程,结合了 SFT、跨模态 RLHF 以及 Distribution Matching Distillation(DMD)技术。这不仅提升了生成质量,还同时实现了推理加速。仅 DMD 一项,就带来了约 7.5 倍的速度提升。另外,JoyAI-Echo 里还整合了一个智能“导演助理”——Director Agent,用户只需用自然语言描述需求,它就能自动拆解成剧本、角色、场景和镜头。

除此之外,它还配备了一套实时超分模块。通过单步超分即可生成高分辨率视频与精细化音频,支持两档分辨率提升:736×1280 → 1152×1920 和 736×1280 → 1472×2560。对于追求画质的应用场景,这项能力非常实用。

总体而言,这次京东在长视频生成上的突破,解决的都是一线落地的硬骨头。从角色一致性到生成效率,再到编辑的灵活性,可谓提供了一套完整的解决方案。

来源:https://www.163.com/dy/article/KUHJ98SQ0511B8LM.html
上一篇美国行业团体致函特朗普政府敦促增产内存应对AI存储危机 下一篇上汽奥迪高管诚意定价破局创新技术逐鹿豪华电动赛道
本站内容用于信息整理与展示,如有侵权或内容问题请及时联系处理。

相关推荐

补充同频道和同主题内容,方便继续浏览更多相关内容。

同类最新

继续查看同栏目最近更新的文章。

更多
加油站卖车 全国首座能源汽车综合服务站落地
科技数码 · 2026-06-04

加油站卖车 全国首座能源汽车综合服务站落地

广汽集团与中国石化在广东湛江遂溪建成全国首座“能源+汽车”综合服务站,推出加油站+汽车销售+维保一体化新模式,填补县域市场跨界空白,构建看车、购车、养车、加油一站式用车服务生态圈。

谷歌被曝研发至少8款Googlebook安卓本 今秋发布
科技数码 · 2026-06-04

谷歌被曝研发至少8款Googlebook安卓本 今秋发布

谷歌正在研发至少8款Googlebook安卓笔记本,计划今年秋季发布。其中4款搭载英特尔PantherLake芯片,3款采用高通骁龙X系列,1款配备联发科迅鲲Ultra芯片并支持可拆卸键盘设计。

巴菲特重仓谷歌而非英伟达的投资逻辑
科技数码 · 2026-06-04

巴菲特重仓谷歌而非英伟达的投资逻辑

伯克希尔·哈撒韦重仓谷歌而非英伟达,因其看好AI基础设施的长期价值。谷歌拥有搜索现金流、云服务和数据中心,商业模式可预测。伯克希尔认为投资“卖铲子的人”更具确定性,而非高风险的AI模型公司。

2026年WWDC最值得关注的升级与实操避坑指南
科技数码 · 2026-06-04

2026年WWDC最值得关注的升级与实操避坑指南

2026年苹果全球开发者大会预计将聚焦于人工智能与操作系统的深度融合。iOS18、iPadOS18等系统或将迎来AI原生体验的全面升级,包括更智能的Siri、系统级AI助手以及开发工具的革新。对于开发者和用户而言,了解新特性适配、隐私数据准备以及测试流程是顺利过渡的关键。

iPhone语音备忘录内置AI转写功能iOS 18起无
科技数码 · 2026-06-04

iPhone语音备忘录内置AI转写功能iOS 18起无

你是否也遇到过这样的场景——会议刚结束、课程刚刚听完、采访也收了尾,手机里却躺着一段十几分钟甚至更长的录音,亟待整理成文字? 原本想着快速转成文本,结果反复暂停、回放、快进,三十分钟的音频硬生生耗了一个多小时才逐字敲完。不少人不得不下载第三方转写工具,到头来却发现——付费门槛才是真正的绊脚石。 其实