arXiv cs.AI· Wei Shi, Ziheng Peng, Sihang Li, Xiting Wang, Xiang Wang, Mengnan Du, Na Zou·· 9 小时前AI 评分32
LLM 智能体为何过度调用工具:诊断内在过度调用偏差
To Call or Not to Call: Diagnosing Intrinsic Over-Calling Bias in LLM Agents
AI 导读
研究提出内在偏差假说(IBH),指出 LLM 智能体的调用/不调用决策映射中存在与激活无关的调用偏移,使其在激活持平时仍倾向调用工具。在 When2Call 基准上,三个家族六个模型调用准确率高但不调用准确率明显偏低,整体准确率仅 55%-70%。团队用稀疏自编码器(SAE)提取决策特征并估计该偏移,再以 AMCS 因果校正,缓解过度调用并提升整体准确率,调用准确率几乎不降。
来源:arXiv cs.AI · arxiv.org