跳到正文
arXiv stat.ML· Inderjeet Singh·· 3 小时前AI 评分31

自适应对抗下具身与智能体 AI 的统计保证极限

Limits of Statistical Assurance for Embodied and Agentic AI under Adaptive Adversaries

AI 导读

研究揭示有限安全评估无法排除在认证前保持未攻击行为、认证后再激活的对抗者,此类对抗者可在 n 次试验中获得 vE[(n-S0)+] 的认证后期望事件数。在 RoCo 协作模拟中,切换策略导致 36 个认证后回合中有 34 个出现指令分离违规;预注册随机 AgentDojo 试验估计每四次任务续接增加 1.98 次安全违规(95% 区间 [1.67, 2.29])。

来源:arXiv stat.ML · arxiv.org