arXiv cs.CL· Kaiser Sun, Bernal Jimenez Gutierrez, Hongjun Liu, Jingyu Zhang, Jie Gao, Mark Dredze, Daniel Khashabi·· 3 小时前AI 评分31
准确但非谦逊:评估知识冲突下 LLM 智能体的认知谦逊
Accurate but Not Humble: Evaluating Epistemic Humility in LLM Agents under Knowledge Conflict
AI 导读
研究提出用认知谦逊(EH)评估 LLM 智能体在知识冲突下的表现,通过 Identify、Solve、Escalate(ISE)三个轨迹级行为维度,在受控冲突与多步执行中的自然冲突两种设定下评测四个智能体。
来源:arXiv cs.CL · arxiv.org