arXiv cs.AI· Yuxuan Chen, Mingwei Liu, Guangsheng Ou, Zekai Zhang, Zike Li, Yanlin Wang, Pelin Zheng·· 3 小时前AI 评分24
MAP4CS：面向高效代码检索器微调的多维数据剪枝框架
MAP4CS: A Multi-dimensional Data Pruning Framework for Efficient Code Retriever Fine-tuning
AI 导读
MAP4CS 是一个自适应数据剪枝框架，通过融合语法结构、语义多样性与分布表示，筛选出高质量核心子集，并配合规则过滤流程。在两个大规模数据集上，它仅用 5% 训练数据即持续优于随机采样基线，性能可比甚至超过全量数据微调。语言分析显示，MAP4CS 能对冗余语料自动去重、对混乱语料降噪。
来源：arXiv cs.AI · arxiv.org