跳到正文
arXiv cs.AI· Nishant Balepur, Kiran Tomlinson, Tobias Schnabel·· 3 小时前AI 评分36

代码理解是编程智能体的瓶颈:CABRA 基准发布

Code Understanding is a Bottleneck for Coding Agents

AI 导读

研究者提出 CABRA(Coding Ability Blueprint for Rigorous Agent evaluation),通过调用图变换从零构建任务,并按任务规模在函数遍历、搜索、运行时解析、指令遵循四个维度调节难度。

来源:arXiv cs.AI · arxiv.org