arXiv · cs.LG· Daniel Mensing, Jan Kapar, Jochen G. Hirsch, Matthias G\"unther, Horst Hahn, Marvin N. Wright·· 4 小时前
多模态扩散模型在联合潜在空间中通过交叉注意力合成 MRI 与表格数据
Multimodal synthesis of MRI and tabular data with diffusion in a joint latent space via cross-attention
AI 导读
研究者提出一种多模态潜在扩散模型，通过交叉注意力在共享潜在空间内联合合成体积 MRI 与表格临床数据，先用变分自编码器融合两种模态，再分别用独立解码器重建。该框架在德国国家队列（NAKO）超 1 万名参与者的 MRI 与临床表格特征上评估，生成影像具备解剖合理性与身体成分一致性，表格模态在标准指标上优于 CTGAN、与 TVAE 相当。
来源：arXiv · cs.LG · arxiv.org