跳到正文
热点事件持续更新

LintEval 基准发布:评估 LLM 重构能力

1 篇报道1 个报道来源4 小时前更新

先了解这件事

AI 综述

Tongwei Deng 等作者发布多语言基准 LintEval,用于评估大语言模型在 linter 引导下的文件重构能力,覆盖 C++、Python、Java 三种语言。 该基准包含 13,061 个初始功能正确的程序和 171,662 条由各语言专用 linter 提取的 lint 告警,评估时联合考察四项指标:功能保持、告警减少、新告警规避与编辑最小性。

AI 根据报道生成 · 3 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月15日
  1. arXiv cs.CL
    LintEval:面向 LLM 的 linter 引导文件重构基准

    LintEval 是覆盖 C++、Python、Java 的多语言基准,包含 13,061 个初始功能正确的程序和 171,662 条 lint 告警,用于评估 linter 引导的文件重构,联合考察功能保持、告警减少、新告警规避与编辑最小性。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。