首页 游戏 软件 资讯 排行榜 专题
首页
AI
B站开源自研 IndexTTS-2.0:情感可控、时长可控的零样本语音合成 AI 模型

B站开源自研 IndexTTS-2.0:情感可控、时长可控的零样本语音合成 AI 模型

热心网友
56
转载
2025-09-10

9 月 9 日消息,B站(Bilibili)昨日(9 月 8 日)发布公告,宣布正式开源其自研语音生成大模型 IndexTTS-2.0,是首个支持精确时长控制(Duration Control)的自回归(Autoregressive)零样本文本转语音(TTS)系统。

免费影视、动漫、音乐、游戏、小说资源长期稳定更新! 👉 点此立即查看 👈

援引 GitHub 页面介绍,相比较传统逐 token 生成的 TTS 系统,IndexTTS-2.0 首次在自回归架构中实现了精准时长控制,特别适合视频配音等需严格音画同步的应用场景。

B站开源自研 IndexTTS-2.0:情感可控、时长可控的零样本语音合成 AI 模型

B站开源自研 IndexTTS-2.0:情感可控、时长可控的零样本语音合成 AI 模型

据介绍,IndexTTS2 支持两种生成模式:

一种可通过明确指定生成的 token 数实现精确时长控制;

另一种则自由生成,保持输入提示的韵律特征。

在声音表达上,IndexTTS2 实现了情感特征与说话人音色的解耦(Emotion-Speaker Disentanglement):分离说话人音色与情绪特征,分别控制。

这意味着用户可以独立指定音色来源和情绪来源,例如用一段音频保留音色,再用另一段不同情感的音频或文本描述赋予情绪,在零样本条件下,模型能精准还原目标音色并完全重现指定情绪。

为提升高情感表达下的语音清晰度,团队引入了 GPT 潜在表示,并设计三阶段训练策略增强生成稳定性。此外,他们基于 Qwen3 微调实现了“软指令”机制,允许用户通过自然语言描述来直观控制情绪方向,降低使用门槛。

B站开源自研 IndexTTS-2.0:情感可控、时长可控的零样本语音合成 AI 模型

在技术性能上,多数据集实验表明,IndexTTS2 在词错率、说话人相似度和情绪保真度上均超越当前最先进零样本 TTS 模型。其方法具备良好扩展性,可应用于其他大型自回归 TTS 系统。团队表示,将公开代码和预训练权重,推动学术研究与产业落地。

技术报告地址:https://arxiv.org/abs/2506.21619

仓库地址:https://github.com/index-tts/index-tts

Demo 展示地址:https://index-tts.github.io/index-tts2.github.io

来源:https://www.ithome.com/0/881/535.htm
免责声明: 游乐网为非赢利性网站,所展示的游戏/软件/文章内容均来自于互联网或第三方用户上传分享,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系youleyoucom@outlook.com。

相关攻略

虫虫漫画全集资源在哪 虫虫漫画正版官网入口详解
手机教程
虫虫漫画全集资源在哪 虫虫漫画正版官网入口详解

虫虫漫画正版官网入口详解 大家一直在找的虫虫漫画正版官网,其实就是 https: www chongchongmanhua com 。不过话说回来,光知道个网址可能还不够,你得清楚它到底好在哪里。我花了些时间仔细体验了一番,发现它的门道还真不少,尤其是内容组织、阅读体验和一些贴心的小功能,做得相当

热心网友
04.02
国漫《灵笼》首部动画电影官宣,哔哩哔哩、艺画开天、新丽电影、阅文集团联合出品
业界动态
国漫《灵笼》首部动画电影官宣,哔哩哔哩、艺画开天、新丽电影、阅文集团联合出品

国漫巅峰《灵笼》首部动画电影正式官宣,B站与阅文集团、艺画开天、新丽影业实力集结 尘埃落定,万众期待!在3月27日晚举行的阅文IP盛典上,备受赞誉的国产动画代表作《灵笼》,正式揭晓了其首部动画大电影的制作计划。这一重磅消息迅速引爆行业与粉丝圈——这部积累了深厚人气与口碑的现象级IP,在完成剧集篇章后

热心网友
04.01
愚人节限时彩蛋:B站首页重磅上线他人偏好内容
科技数码
愚人节限时彩蛋:B站首页重磅上线他人偏好内容

快科技4月1日消息,今天是愚人节,不少科技公司纷纷上线整活功能,哔哩哔哩(B站)也如约带来年度彩蛋玩法。今日零点,B站首页限时功能彩蛋正式上线,相关功能仅开放24小时。快科技实测发现,在移动端首页底

热心网友
04.01
关于哔哩哔哩B站平台官方发布声明的详细解读
科技数码
关于哔哩哔哩B站平台官方发布声明的详细解读

“哔哩哔哩”微信公号3月31日晚, “哔哩哔哩”微信公号发布 关于4月1日首页功能彩蛋的说明,全文如下:本 期资深 编 辑 周玉华

热心网友
04.01
B站推荐算法升级:不再“猜你喜欢”是好是坏?
科技数码
B站推荐算法升级:不再“猜你喜欢”是好是坏?

3月31日下午,哔哩哔哩弹幕网(B站)发文表示:从明天(4月1日)零点起,B站将下线猜你喜欢算法,不再根据你的喜好来推荐主页内容,并上线推荐新算法。3月5日晚间,B站公布了截至2025年财报。数据显

热心网友
03.31

最新APP

火柴人传奇
火柴人传奇
动作冒险 04-01
街球艺术
街球艺术
体育竞技 04-01
飞行员模拟
飞行员模拟
休闲益智 04-01
史莱姆农场
史莱姆农场
休闲益智 04-01
绝区零
绝区零
角色扮演 04-01

热门推荐

生存33天新手阵容推荐生存33天高性价比入门搭配指南
游戏攻略
生存33天新手阵容推荐生存33天高性价比入门搭配指南

末日生存手游推荐:前往九游开启你的废土冒险之旅 近年来,末日生存题材手游以其独特的沉浸感与生存挑战,持续吸引着大量玩家。在废墟世界中探索资源、应对危机、重建秩序的核心玩法,带来了紧张而富有成就感的游戏体验。如果你正在寻找一款高品质的末日生存手游,九游平台无疑是理想的起点。这里汇集了多款深受好评的末日

热心网友
04.06
纪念碑谷3第二关通关攻略纪念碑谷3第二关详细步骤与解谜技巧
游戏攻略
纪念碑谷3第二关通关攻略纪念碑谷3第二关详细步骤与解谜技巧

《纪念碑谷3》第二关“小镇”超详细图文攻略 《纪念碑谷》系列凭借其独特的视觉艺术与空间谜题设计广受赞誉。最新发布的《纪念碑谷3》在第二章节“小镇”中,将这一美学风格与机关逻辑提升到了新的层次。本章节不仅延续了标志性的极简主义美学,其空间层次感与交互严谨性也更具挑战性。本攻略将为你完整解析《纪念碑谷3

热心网友
04.06
生存33天沙漠之王精通沙漠之王的33天极限生存打法与实战技巧
游戏攻略
生存33天沙漠之王精通沙漠之王的33天极限生存打法与实战技巧

《生存33天》:“沙漠之王”高效通关攻略 在热门生存手游《生存33天》中,玩家面临的挑战远不止于无尽的丧尸潮。游戏深度结合了生存资源管理与高难度首领战策略,其中“沙漠之王”堪称游戏中期最具考验的BOSS。它不仅是实力分水岭,击败后更能获得稀有材料、限定头衔及海量经验金币,大幅推动队伍成长。本文将深入

热心网友
04.06
生存33天四只手Boss通关攻略生存33天高难度四手怪打法详解
游戏攻略
生存33天四只手Boss通关攻略生存33天高难度四手怪打法详解

《生存33天》“四只手”首领完全通关攻略 你是否在“四只手”首领关卡止步不前?不必焦虑,这个Boss在《生存33天》中素有“新秀杀手”之称。初次遭遇时,其独特的机制与高额伤害往往让玩家措手不及,不少冒险者在此耗费了数日时光。然而,只要掌握了它的核心规律,你就会发现这个敌人不过是外强中干。以下这份详尽

热心网友
04.06
剑与远征启程赫普角色介绍剑与远征启程赫普强度分析与技能解析
游戏攻略
剑与远征启程赫普角色介绍剑与远征启程赫普强度分析与技能解析

《剑与远征:启程》前排坦克英雄赫普深度解析:双形态切换机制与实战搭配指南 在《剑与远征:启程》这款策略放置手游中,组建一支攻守兼备的队伍至关重要,而前排坦克英雄的选择往往是决定胜败的关键。今天,我们将聚焦于蛮血部族的一位特色英雄——赫普。作为一名超稀有品质的坦克,赫普不仅具备坚实的防御力,更凭借独特

热心网友
04.06