多模态知识蒸馏框架提升胃癌分类
热点事件持续更新
多模态知识蒸馏框架提升胃癌分类
1 篇报道1 个报道来源4 小时前更新
先了解这件事
AI 综述
Shrihari Dumbre 与 Bikash Santra 提出多模态知识蒸馏(MKD)框架,用于全切片图像的胃腺癌分类。该框架用低秩多模态融合(LMF)结合预训练 WSI 图像编码器与临床文本编码器,教师模型学习图像-文本融合表示,学生模型蒸馏后仅凭图像即可推理。 在 PatchGastric 基准上,该框架平均准确率比现有最优方法至少高 3.35%,且不依赖 Transformer 融合、多任务学习或大语言模型,源代码已开源。
AI 根据报道生成 · 3 小时前更新
最新进展10月7日 12:00
多模态知识蒸馏用于全切片图像胃腺癌分类报道时间线
沿着报道,了解事件的不同侧面。
10月7日
- arXiv cs.AI多模态知识蒸馏用于全切片图像胃腺癌分类
研究提出多模态知识蒸馏(MKD)框架,用低秩多模态融合(LMF)结合预训练WSI图像编码器与临床文本编码器,教师模型学习图像-文本融合表示,学生模型蒸馏后仅凭图像即可推理。在PatchGastric基准上平均准确率比SOTA至少高3.35%,且不依赖Transformer融合、多任务学习或大语言模型,源代码已开源。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。