跳到正文
arXiv · cs.AI· Duc Kieu, Kien Do, Minh Khoa Le, Tung Kieu, Dang Nguyen, Thin Nguyen·· 4 小时前

Modaliff:面向任意模态生成(any-to-any)的统一 Token 扩散模型

Modaliff: A Unified Token Diffusion Model for Any-to-Any Generation

AI 导读

Modaliff 是一个基于 token 的扩散模型,可从广泛存在的双模态数据对中学习,在文本、图像、音频之间实现任意模态生成,同时保留各模态的原生 latent 序列。

来源:arXiv · cs.AI · arxiv.org