跳到正文
arXiv cs.AI· Shrihari Dumbre, Bikash Santra·· 5 小时前AI 评分17

多模态知识蒸馏用于全切片图像胃腺癌分类

Multimodal Knowledge Distillation for Gastric Adenocarcinoma Classification from Whole-Slide Images

AI 导读

研究提出多模态知识蒸馏(MKD)框架,用低秩多模态融合(LMF)结合预训练WSI图像编码器与临床文本编码器,教师模型学习图像-文本融合表示,学生模型蒸馏后仅凭图像即可推理。在PatchGastric基准上平均准确率比SOTA至少高3.35%,且不依赖Transformer融合、多任务学习或大语言模型,源代码已开源。

来源:arXiv cs.AI · arxiv.org