arXiv cs.LG· Nicolas Lacroix, Frederic Precioso, Mireille Blay-Fornarino, Sebastien Mosser·· 6 小时前AI 评分20
用小型语言模型逆向工程机器学习流水线结构
Using Small Language Models to Reverse-Engineer Machine Learning Pipelines Structures
AI 导读
一项确认性研究评估了小型语言模型(SLM)能否从源代码中提取机器学习流水线的各个阶段。结果显示,分类体系(taxonomy)的措辞会显著影响分类性能,表现最好的 SLM 结果良好但未超越其他分类器,且三种分类方法在探究数据科学家实践时得出的结论存在显著差异。研究指出,现有分类方法的局限会扭曲对 ML 实践的理解,当前 SLM 无需微调即有潜力,但推理成本高,限制其在大规模研究中的适用性。
来源:arXiv cs.LG · arxiv.org