跳到正文
热点事件持续更新

SEAM:低资源TTS词表扩展的零音频初始化方法

1 篇报道1 个报道来源3 小时前更新

先了解这件事

AI 综述

Walaa Othman、Baher Mohammad、Stamatios Lefkimmiatis 和 Ammar Ali 提出 SEAM,一种用于低资源 TTS 词表扩展的零音频初始化方法:它不需要新 token 的音频,而是用已知子 token 为新 token 构建嵌入,并用频谱滤波保留时序音素顺序,再以闭式岭回归把新嵌入对齐到预训练条件流形。 作者称,在三种语言和两种 TTS 架构上,SEAM 用最多少 4 倍的训练数据即可接近或匹配基线,相比随机初始化和均值池化将样本复杂度降低 75%。这些结论来自论文报告,尚待独立验证。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月20日
  1. arXiv · cs.LG
    SEAM:面向低资源 TTS 的频谱嵌入对齐与合并方法

    SEAM 是一种零音频初始化方法,通过已知子 token 为新 token 构建嵌入,用于扩展条件 TTS 模型的词表。它用频谱滤波保留时序音素顺序,并以闭式岭回归将新嵌入对齐到预训练条件流形。在三种语言和两种 TTS 架构上,SEAM 用最多少 4 倍的训练数据接近或匹配基线,相比随机初始化和均值池化将样本复杂度降低 75%。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。