arXiv cs.LG· Babak Barazandeh, Connor Swanson, Chinmay Kulkarni, Nikhil Mungel·· 3 小时前AI 评分30
OnTrack:基于流式结构感知最优传输的 LLM 智能体轨迹实时监控与干预
OnTrack: Real-Time Monitoring and Intervention in LLM Agent Trajectories via Streaming Structure-Aware Optimal Transport
AI 导读
OnTrack 是一种流式监控机制,通过将 LLM 智能体的步骤与依赖关系同已记录的成功运行轨迹对比,每步约 1 毫秒即可告警或阻断智能体。在 SWE-bench 轨迹上,该方法仅凭前 8 步就将失败轨迹排在成功轨迹之下,AUROC 比内容相似度方法高 0.057;配合中止策略可节省约 18% 的失败运行算力,其中 83% 的中断运行确实走向失败。
来源:arXiv cs.LG · arxiv.org