arXiv cs.AI· Nishant Balepur, Kiran Tomlinson, Tobias Schnabel·· 3 小时前AI 评分36
代码理解是编程智能体的瓶颈:CABRA 基准发布
Code Understanding is a Bottleneck for Coding Agents
AI 导读
研究者提出 CABRA(Coding Ability Blueprint for Rigorous Agent evaluation),通过调用图变换从零构建任务,并按任务规模在函数遍历、搜索、运行时解析、指令遵循四个维度调节难度。
来源:arXiv cs.AI · arxiv.org