跳到正文
热点事件持续更新

δMDM:插入式扩散模型加入纠错机制

1 篇报道1 个报道来源1 小时前更新

先了解这件事

AI 综述

Durga Prasad Maram 等作者提出 δMDM,在插入式掩码扩散模型中增加替换与删除操作,使中间生成结果可以被修正。 在 OpenWebText 无条件文本生成上,δMDM 在最高推理预算下的生成困惑度较 FlexMDM 减半;在 TinyGSM 条件生成上,它以一半的 NFEs 达到 FlexMDM 同等准确率。作者称,该机制使激进并行解码变得可行,同时提升生成速度与质量。

AI 根据报道生成 · 1 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月27日
  1. arXiv · cs.CL
    δMDM:带纠错机制的插入式序列生成

    δMDM 为插入式掩码扩散模型加入替换与删除操作,使中间生成结果可被修正。在 OpenWebText 无条件文本生成上,最高推理预算下其生成困惑度较 FlexMDM 减半;在 TinyGSM 条件生成上以一半的 NFEs 达到 FlexMDM 同等准确率。该机制让激进并行解码变得可行,同时提升生成速度与质量。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。