arXiv stat.ML· Inderjeet Singh·· 3 小时前AI 评分31
自适应对抗下具身与智能体 AI 的统计保证极限
Limits of Statistical Assurance for Embodied and Agentic AI under Adaptive Adversaries
AI 导读
研究揭示有限安全评估无法排除在认证前保持未攻击行为、认证后再激活的对抗者,此类对抗者可在 n 次试验中获得 vE[(n-S0)+] 的认证后期望事件数。在 RoCo 协作模拟中,切换策略导致 36 个认证后回合中有 34 个出现指令分离违规;预注册随机 AgentDojo 试验估计每四次任务续接增加 1.98 次安全违规(95% 区间 [1.67, 2.29])。
来源:arXiv stat.ML · arxiv.org