VoTSpeech:解耦音色设计与语音生成
热点事件持续更新
VoTSpeech:解耦音色设计与语音生成
1 篇报道1 个报道来源4 小时前更新
先了解这件事
AI 综述
Wenbing Yang等作者发布论文提出VoTSpeech,一种指令跟随的文本转语音(TTS)方法,通过显式中间音色latent将音色设计与语音生成解耦。 该方法基于共享语言模型骨干:先用flow-based模块从文本指令预测连续音色latent,再将其同时作为语言模型与Acoustic DiT的共享条件,最终由音频VAE解码器生成波形。作者称代码、模型和音频样例已公开。
AI 根据报道生成 · 1 小时前更新
最新进展10月14日 12:00
VoTSpeech:将音色设计从语音生成中解耦的指令跟随 TTS报道时间线
沿着报道,了解事件的不同侧面。
10月14日
- arXiv · cs.CLVoTSpeech:将音色设计从语音生成中解耦的指令跟随 TTS
VoTSpeech 通过显式中间音色 latent 将音色设计与语音生成解耦,基于共享语言模型骨干,先用 flow-based 模块从文本指令预测连续音色 latent,再同时作为语言模型与 Acoustic DiT 的共享条件,最终由音频 VAE 解码器生成波形。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。