跳到正文
arXiv cs.CV· Hao Wang, Qiwei Zeng, Jinghao Lin, Shuchang Ye, Yuezhe Yang, Yige Peng, Haoyuan Che, Jinman Kim, Lei Bi·· 4 小时前AI 评分20

ΔRepresentation:面向医学 VLM 的几何监督表型表征学习框架

$\Delta$Representation: Geometry Supervised Representation Learning of Phenotypes via Counterfactual Reasoning for Medical VLMs

AI 导读

针对医学 VLM 中语义对齐方法无法建模病变相对正常解剖结构的表型增量问题,研究者提出 ΔRepresentation 框架,包含几何监督的 BaseAnatomy 模块与基于反事实推理的 ΔPhenotype 增量表征学习模块。在 ReXGroundingCT 和 LIDC-IDRI 数据集上,该方法有效结构化病理表型表征,提升了医学 VLM 的病灶定位与表型刻画准确率,代码已开源。

来源:arXiv cs.CV · arxiv.org