arXiv · cs.AI· Duc Kieu, Kien Do, Minh Khoa Le, Tung Kieu, Dang Nguyen, Thin Nguyen·· 4 小时前
Modaliff:面向任意模态生成(any-to-any)的统一 Token 扩散模型
Modaliff: A Unified Token Diffusion Model for Any-to-Any Generation
AI 导读
Modaliff 是一个基于 token 的扩散模型,可从广泛存在的双模态数据对中学习,在文本、图像、音频之间实现任意模态生成,同时保留各模态的原生 latent 序列。
来源:arXiv · cs.AI · arxiv.org