LintEval 基准发布:评估 LLM 重构能力
热点事件持续更新
LintEval 基准发布:评估 LLM 重构能力
1 篇报道1 个报道来源4 小时前更新
先了解这件事
AI 综述
Tongwei Deng 等作者发布多语言基准 LintEval,用于评估大语言模型在 linter 引导下的文件重构能力,覆盖 C++、Python、Java 三种语言。 该基准包含 13,061 个初始功能正确的程序和 171,662 条由各语言专用 linter 提取的 lint 告警,评估时联合考察四项指标:功能保持、告警减少、新告警规避与编辑最小性。
AI 根据报道生成 · 3 小时前更新
最新进展10月15日 12:00
LintEval:面向 LLM 的 linter 引导文件重构基准报道时间线
沿着报道,了解事件的不同侧面。
10月15日
- arXiv cs.CLLintEval:面向 LLM 的 linter 引导文件重构基准
LintEval 是覆盖 C++、Python、Java 的多语言基准,包含 13,061 个初始功能正确的程序和 171,662 条 lint 告警,用于评估 linter 引导的文件重构,联合考察功能保持、告警减少、新告警规避与编辑最小性。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。