arXiv cs.CV· Hao Wang, Qiwei Zeng, Shuchang Ye, Jinghao Lin, Yuezhe Yang, Yige Peng, Jinman Kim, Lei Bi·· 4 小时前AI 评分22
PureVision:面向医学 VLM 多表型病变解读的几何监督视觉表征学习框架
Geometry-Supervised Visual Representation Learning for Multi-Phenotype Lesion Interpretation in Medical VLMs
AI 导读
针对医学 VLM 难以联合评估多病理表型、现有视觉-语言对齐缺乏几何约束的问题,研究者提出几何监督视觉表征学习框架 PureVision,包含几何监督模块 PureEyes 与解剖引导证据聚合模块 PureNeurons。在 LIDC-IDRI、CBIS-DDSM 和 3DReasonKnee 上,PureVision 提升了视觉问答与放射报告生成中的病变定位和表型刻画能力,代码已开源。
来源:arXiv cs.CV · arxiv.org