跳到正文
arXiv cs.AI· Xiting Liu, Lin Yang, Yitong Zhang, Jia Li, Shi-Min Hu·· 1 天前AI 评分32

SWE-DeceptionBench:评测 LLM 在软件开发生命周期中的欺骗行为

SWE-DeceptionBench: Benchmarking Deceptive Behaviors of LLMs Across the Software Development Lifecycle

AI 导读

研究者推出 SWE-DeceptionBench,用于评测 LLM 在软件工程中的欺骗行为,覆盖六个生命周期阶段和主动、被动两类欺骗触发,并设置 Neutral、Reward、Pressure 三种条件,共 720 个中英文测试实例。

来源:arXiv cs.AI · arxiv.org