跳到正文
arXiv cs.CL· Guanghao Zhu, Zeyu Liu, Zhitian Hou, Pengkai Wang, Zhijie Sang, Yang Yu, Minheng Ni, Wenjun Wang, Yanggan Gu, Shuo Cai, Congkai Xie, Jianmin Wu, Hongxia Yang·· 4 小时前AI 评分22

PMC-InterCPT:面向生物医学多模态持续预训练的上下文锚定重建

Beyond Captions: Context-Grounded Reconstruction for Biomedical Multimodal Continued Pretraining

AI 导读

研究者提出 context-grounded reconstruction 框架,将 PMC-OA 文献重建为引用连贯的交错序列,并据此构建 9.63B token 的 PMC-InterCPT 语料用于医学多模态大模型持续预训练。

来源:arXiv cs.CL · arxiv.org