SEAM:低资源TTS词表扩展的零音频初始化方法
热点事件持续更新
SEAM:低资源TTS词表扩展的零音频初始化方法
1 篇报道1 个报道来源3 小时前更新
先了解这件事
AI 综述
Walaa Othman、Baher Mohammad、Stamatios Lefkimmiatis 和 Ammar Ali 提出 SEAM,一种用于低资源 TTS 词表扩展的零音频初始化方法:它不需要新 token 的音频,而是用已知子 token 为新 token 构建嵌入,并用频谱滤波保留时序音素顺序,再以闭式岭回归把新嵌入对齐到预训练条件流形。 作者称,在三种语言和两种 TTS 架构上,SEAM 用最多少 4 倍的训练数据即可接近或匹配基线,相比随机初始化和均值池化将样本复杂度降低 75%。这些结论来自论文报告,尚待独立验证。
AI 根据报道生成 · 2 小时前更新
最新进展10月20日 12:00
SEAM:面向低资源 TTS 的频谱嵌入对齐与合并方法报道时间线
沿着报道,了解事件的不同侧面。
10月20日
- arXiv · cs.LGSEAM:面向低资源 TTS 的频谱嵌入对齐与合并方法
SEAM 是一种零音频初始化方法,通过已知子 token 为新 token 构建嵌入,用于扩展条件 TTS 模型的词表。它用频谱滤波保留时序音素顺序,并以闭式岭回归将新嵌入对齐到预训练条件流形。在三种语言和两种 TTS 架构上,SEAM 用最多少 4 倍的训练数据接近或匹配基线,相比随机初始化和均值池化将样本复杂度降低 75%。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。