arXiv · cs.LG· Kasra Kamali, Basim Azam, Tuan Duong Trinh, Jean Honorio, Naveed Akhtar·· 16 小时前
ODC:面向文生图语义对齐的推理时正交漂移校正方法
ODC: Orthogonal Drift Correction for Improved Text-to-Image Semantic Alignment at Inference
AI 导读
研究人员提出推理时引导方法 Orthogonal Drift Correction(ODC),无需重新训练模型或额外用户输入即可缓解文生图模型的语义漂移。该方法先在视觉-语言共享嵌入空间中定位初始图像与提示词的漂移向量,提取其与提示词方向正交的分量并经词汇表代理机制回译为文本,再通过自适应降秩概念移除模块生成精炼文本条件进行二次生成。
来源:arXiv · cs.LG · arxiv.org