论文信息
题目:MedM2G: Unifying Medical Multi-Modal Generation via Cross-Guided Diffusion with Visual Invariant
MedM2G:通过视觉不变性交叉引导扩散统一医学多模态生成
作者:Chenlu Zhan, Yu Lin, Gaoang Wang, Hongwei Wang, Jian Wu
论文创新点
- 统一医学多模态生成框架:论文提出了MedM2G,这是第一个能够统一对齐、提取和生成多种医学模态的生成框架。通过中心对齐方法,MedM2G在统一空间中对齐了文本、CT、MRI和X射线等多种医学模态,解决了传统方法在处理多模态数据时的高成本和低效率问题。
- 医学视觉不变性保留:为了保留每种医学成像模态的特定临床知识