阿里新语音模型:可定制角色与背景音乐的freestyle创作
3月2日最新消息,阿里巴巴今日正式发布了两款语音新模型:基于参考音频的声音克隆模型Fun-CosyVoice3.5,以及无需参考音频的音色设计模型Fun-AudioGen-VD。
免费影视、动漫、音乐、游戏、小说资源长期稳定更新! 👉 点此立即查看 👈

据介绍,这两款模型均引入了强大的“指令遵循”能力,让用户可以自由控制声音的情感表达、语速快慢以及场景适配。
它们支持freestyle(自由风格模式)定制角色,适用于有声书制作、游戏配音、智能客服、播客内容、在线教育、直播互动等多个应用场景。
值得一提的是,这两款模型在同尺寸模型的基准测评中斩获了多项SOTA(最先进水平)成果。
在Seed-TTS基准测试的中文“困难案例”指标中,Fun-CosyVoice3.5表现尤为抢眼,其词错误率(Word Error Rate, WER)和说话人相似度(Speaker Similarity, SSIM)均达到最佳水平。
同时,由于优化了“困难案例”的发音表现,生僻字句错误率从原来的15.2%显著降低至5.3%。

其中,Fun-CosyVoice3.5支持freestyle指令控制,有效解决了传统克隆模型只能模仿、无法指定具体角色的痛点。
Fun-AudioGen-VD则专注于“从无到有”的音色设计。在指令遵循能力和可控性的Instruct-TTS基准测试中,其表现超越了gemini2.5-pro和gpt-4o-mini-tts。

该模型不仅能根据文字描述定制音色和情感,还能同步模拟复杂的听觉环境,实现“人物+场景”的一体化生成效果。
在强化学习训练过程中,两款模型通过采用DiffRO和GRPO技术,增加了时长和韵律多通道的奖励机制。
此外,Fun-CosyVoice3.5所使用的tokenizer帧率减半,不仅提高了训练效率,其首包延迟也降低了35%,大幅提升了实时交互体验。
即日起,用户可在阿里云百炼平台直接调用这两款最新模型。
相关攻略
2026年4月,AI行业发生了一起颇具深意的事件。美国知名AI公司Anthropic,突然对其平台上的一个第三方工具——OpenClaw的开发维护者账号,实施了临时封禁措施。值得注意的是,此次封禁距离Anthropic宣布调整其大模型Claude的API定价策略,仅仅过去一周时间。时间点的紧密关联,
最近,AI领域有个动向值得关注。由前OpenAI研究员Dario Amodei创立的Anthropic,其推出的团队协作产品Claude Cowork,正在全球企业办公场景中快速铺开。目前,已有超过1200家中型科技团队接入了这项服务。它的定位很明确:不做个人助手,而是要做团队共享的AI办公基础设施
2026年4月,一则来自行业内部的消息引发了广泛关注:字节跳动旗下那个在2023年成立的AI核心研发部门——Seed团队,在过去一年里,有近70名技术人才相继离开。这批人才的去向,主要集中在腾讯、阿里这样的头部大厂,以及一些势头正猛的AI初创企业。其中,有近30人加入了腾讯,负责AI基础设施与数据基
2026年4月,谷歌为其核心AI产品Gemini聊天机器人推出了一项革命性功能:交互式3D模型生成与动态模拟。这项更新已正式向Gemini Pro用户开放,标志着AI交互从静态图文迈入了可操作、可实时调整的三维可视化时代。用户仅需使用自然语言描述,即可生成并操控复杂的动态三维模拟,极大地降低了理解抽
2026年4月,AI消费市场被一款新模型搅动了。Meta发布了由其超级智能实验室打造的全新生成式AI模型——Muse Spark。消息一出,效果立竿见影:旗下Meta AI应用在美国App Store的排名,直接从发布前不温不火的第57位,火箭般蹿升至总榜第5位。根据市场机构Appfigures的数
热门专题
热门推荐
开发者Chris通过Codex服务,仅用一句指令便自主完成开源赏金任务,盈利23 68美元,覆盖订阅成本。此事展示AI自主执行商业闭环的潜力,也引发成本与安全争议。AI正从工具向主动创收者转变。
在《崩坏:星穹铁道》的众多角色中,火花以其独特的技能机制,为战斗策略带来了丰富的变数与操作乐趣。她并非单纯的数值输出角色,而是一位集机动性、爆发伤害与战术价值于一体的近战专家。深入理解其技能联动,是充分发挥其战场潜力的关键。 普通攻击 - 迅刃连斩 火花的普通攻击“迅刃连斩”,是一套衔接流畅的近战连
想在《迷你世界》中解锁智能芯片的全部潜力?掌握升级方法是关键一步。通过升级,芯片不仅能获得更强大的功能,还能显著提升自动化与创造体验。本指南将为您提供一套清晰、高效的升级方案,助您快速掌握核心技巧。 准备材料:精准收集 成功的升级始于充分的准备。您需要提前备齐以下核心资源:精铁锭、蓝色电能线、硅石以
《斗罗大陆:猎魂世界》于5月11日至18日限时开启“寻宝之旅”活动。玩家通过任务或礼包获取道具,掷点前进即可领取限定觉醒券、钻石等奖励。完成整圈可得固定资源,累计积分可兑换更多奖励;第16圈起奖励品质提升,整体效率优化。活动门槛低、回报高,无需强制消费,适合各类玩家参与。
全新秘境“龙骧御六合”开放高难度挑战,玩家需在悬浮石枷上协同维持平衡,应对雷霆与坠石冲击,移动石板可削弱伤害。后续Boss“独夫”登场时,部分队员需切入其内心,其余成员按提示执行阵列动作,全程考验队伍反应与协作能力。





