首页 游戏 软件 资讯 排行榜 专题
首页
科技数码
微软开源VibeVoice-1.5B音频模型:支持中文生成,90分钟4人对话语音一键合成

微软开源VibeVoice-1.5B音频模型:支持中文生成,90分钟4人对话语音一键合成

热心网友
19
转载
2025-08-28
感谢网友 地板轰鸣 的线索投递!

8 月 27 日消息,科技媒体 marktechpost 于 8 月 25 日发布博文,报道称微软发布开源文本转语音(TTS)模型 VibeVoice-1.5B,可一次生成最长 90 分钟、最多 4 位不同说话者的自然语音,并支持跨语言及歌声合成。

免费影视、动漫、音乐、游戏、小说资源长期稳定更新! 👉 点此立即查看 👈

在架构方面,VibeVoice-1.5B 基于 1.5B 参数的 Qwen2.5 语言模型,结合声学(Acoustic)与语义(Semantic)双分词器(Tokenizer),以 7.5Hz 低帧率处理。

声学分词器使用 σ-VAE 结构,将 24kHz 原始音频压缩至 3200 分之一;语义分词器则通过语音识别代理任务训练,保留对话语义。解码端采用 1.23 亿参数的扩散解码器,结合分类器自由引导和 DPM-Solver,来提升音质与细节表现。

该模型为确保在长篇对话中保持语音连贯性与说话人一致性,在训练中逐步扩展上下文长度,从 4k 至 65k Tokens,其架构支持多说话者的轮流发言,模拟自然对话场景,且可在流式模式下生成长音频,为未来实时 TTS 奠定基础。

VibeVoice-1.5B 也有局限,目前仅支持英语与中文,其他语言可能出现不准确或不当内容;不支持说话人语音重叠,也无法生成背景音效或音乐。微软明确禁止将该模型用于声音冒充、虚假信息传播或绕过身份验证等用途,并提醒用户遵守法律并标明 AI 生成来源。

微软表示,该模型主要面向科研和开发者社区,适合播客制作、对话式 AI、语音内容生成等领域。未来将推出参数更大的 7B 版本,支持低延迟交互和更高保真度的实时合成,进一步拓展应用场景。

附上参考地址

  • 微软 VibeVoice-1.5B 技术报告

  • Hugging Face

  • GitHub

来源:https://www.ithome.com/0/878/264.htm
免责声明: 游乐网为非赢利性网站,所展示的游戏/软件/文章内容均来自于互联网或第三方用户上传分享,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系youleyoucom@outlook.com。

相关攻略

微软推送 Win10 三月安全更新:修复卡死、更新证书、提升部分显卡稳定性等
电脑教程
微软推送 Win10 三月安全更新:修复卡死、更新证书、提升部分显卡稳定性等

微软发布 Win10 三月安全更新 KB5078885:解决系统卡顿、更新安全启动证书并增强显卡兼容性 3月11日消息,在本月的补丁星期二(3月10日),微软面向已加入“扩展安全更新”(ESU)计划的 Windows 10 用户,正式推送了累积更新 KB5078885。安装此更新后,操作系统版本将升

热心网友
04.03
微软 Win11 26H1 推送 28000.1719 更新:设置应用 AI 智能体支持中文
电脑教程
微软 Win11 26H1 推送 28000.1719 更新:设置应用 AI 智能体支持中文

微软 Win11 26H1 28000 1719 更新详解:AI 智能体全面支持中文 2025年3月,微软再次为 Windows 11 用户带来了重要更新。面向 Windows 11 26H1 通道,本次 KB5079466 补丁将系统版本号升级至 Build 28000 1719。此次更新聚焦于优

热心网友
04.03
微软 Surface Laptop 3 英特尔版获推固件更新:改善触控笔使用体验、解决第三方应用兼容性等
科技数码
微软 Surface Laptop 3 英特尔版获推固件更新:改善触控笔使用体验、解决第三方应用兼容性等

微软Surface Laptop 3英特尔版获推关键固件升级:显著优化触控笔响应与应用兼容性 经常留意Surface系列更新的用户可能已经发现,微软于近期向搭载英特尔平台的Surface Laptop 3设备推送了一项重要的固件更新。本次升级的核心目标清晰明确:重点提升了图形处理单元的稳定性与效率,

热心网友
04.02
微软正式移除Windows SaRA工具,多版本系统受影响
电脑教程
微软正式移除Windows SaRA工具,多版本系统受影响

4月1日消息,微软发布了一篇新的支持文章,宣布在所有受支持Windows版本更新中,已移除Microsoft Support and Recovery Assistant(SaRA)命令行工具。此举

热心网友
04.01
Win11新3月更新翻车?微软紧急发布修复补丁
电脑教程
Win11新3月更新翻车?微软紧急发布修复补丁

4月1日消息,微软今日发布了带外修复补丁KB5086672,解决了此前被紧急撤回的3月预览更新KB5079391的安装错误问题。本月早些时候,微软推送了Windows 11 2026年3月非安全更新

热心网友
04.01

最新APP

火柴人传奇
火柴人传奇
动作冒险 04-01
街球艺术
街球艺术
体育竞技 04-01
飞行员模拟
飞行员模拟
休闲益智 04-01
史莱姆农场
史莱姆农场
休闲益智 04-01
绝区零
绝区零
角色扮演 04-01

热门推荐

《洛克王国》世界圣羽翼王打法攻略-圣羽翼王技能与实战详解
游戏攻略
《洛克王国》世界圣羽翼王打法攻略-圣羽翼王技能与实战详解

速览攻略:世界圣羽翼王核心打法与全面解析 本攻略将为你完整呈现《洛克王国》世界圣羽翼王的通关秘籍,深度剖析两种高效实战打法:追求极致速度的“燃薪虫四回合速通”与稳定输出的“酷拉无限连击流”。文章将进一步解析这位翼系精灵王的技能机制、属性克制关系及其在PVE与PVP中的实战定位,帮助你彻底掌握应对其隐

热心网友
04.06
《异种航员2》工程系统详解-工作坊与资源管理指南
游戏攻略
《异种航员2》工程系统详解-工作坊与资源管理指南

速览:工程系统核心机制解析 在《异种航员2》中,工程系统是整个抵抗力量赖以运转的“战略后勤中枢”。无论是研发新武器、生产重型装甲还是制造先进飞行器,所有实体装备的产出都依赖于此。简言之,该系统的核心运作围绕着两大关键:工程师人力的高效配置与全球稀缺资源的精细化调度。工程师的数量直接决定了每个项目的建

热心网友
04.06
《洛克王国世界》治愈兔位置详解-任务与战斗关键精灵
游戏攻略
《洛克王国世界》治愈兔位置详解-任务与战斗关键精灵

核心速览 在《洛克王国世界》中,治愈兔是一位兼具功能性任务角色与实战辅助能力的精灵。它的价值不仅在剧情推进中体现,更在于对战里出色的治疗与防护表现。本文将为你全面解析治愈兔的精准获取位置、种族属性特点以及实战技能搭配,助你顺利捕捉并最大化其在队伍中的作用。所有关键信息将通过清晰的图文内容详细展示,确

热心网友
04.06
《红色沙漠》传说之狼打法-传说之狼击杀流程详解
游戏攻略
《红色沙漠》传说之狼打法-传说之狼击杀流程详解

速览 在《红色沙漠》中,挑战传说之狼这一强大的任务BOSS,需要玩家进行充分的准备并遵循完整的任务流程。整个过程环环相扣,你必须首先参与塞莱斯特家族的势力任务,通过完成任务将家族声望提升至指定等级,才能解锁【传说之狼】的专属讨伐任务,最终直面这个传说中的强大生物。 红色沙漠传说之狼怎么打 归根结底,

热心网友
04.06
《宝可梦Pokopia》舒适度提升攻略-环境等级与栖息地优化指南
游戏攻略
《宝可梦Pokopia》舒适度提升攻略-环境等级与栖息地优化指南

【宝可梦Pokopia】舒适度全解析:快速提升环境等级的核心秘诀 你是否正在探索《宝可梦Pokopia》世界,并希望有效提升宝可梦栖息地的舒适度?舒适度不仅是衡量宝可梦快乐程度的晴雨表,更是解锁游戏核心内容、加速发展的关键驱动指标。本攻略将系统性地为你揭示提升舒适度的核心途径,涵盖从装饰栖息地、建造

热心网友
04.06