arXiv cs.AI· Valerii Iakovlev, Markus Spanring, Martin Flechl·· 8 小时前AI 评分25
SLS-Bench：基于合成可观测性数据的事件日志摘要基准
SLS-Bench: A Benchmark for Incident Log Summarization with Synthetic Observability Data
AI 导读
研究者推出 SLS-Bench，一个面向事件日志摘要的基准，包含 90 个基于真实事件报告构建的任务，每个任务配有合成日志流和参考摘要。其数据生成管线将事件报告转为结构化事件模型，结合叙事锚定、生成器-验证器循环及与真实日志流的统计对比，生成逼真可控的可观测性数据。对 14 个 LLM 的评测显示，前沿模型能生成有用摘要但成本与延迟较高，开放权重模型明显落后。
来源：arXiv cs.AI · arxiv.org