arXiv cs.LG· Do Nguyen-Thanh, Junlin Fang, Bing Li, Zhen Fang, Sean Du·· 7 小时前AI 评分24
SOAP:无需步骤级标签的 LLM 智能体失败归因框架
Can Failed Trajectories Reveal Where Agents Go Wrong? Agentic Failure Attribution Without Step-Level Labels
AI 导读
研究提出 SOAP(Spectral scOring with Attention-guided Propagation)框架,可在仅有失败轨迹、无步骤级标签和成功参考集的条件下完成 LLM 智能体失败归因。SOAP 基于 LLM 表示构建谱参考空间为每步打基础错误分,并利用注意力模式推导步骤依赖,将下游错误证据向上游传播以缓解下游污染。实验显示其归因表现持续优于竞争基线。
来源:arXiv cs.LG · arxiv.org