arXiv cs.CL· Minji Park, Seunghyun Yoon, Hyuk Lim·· 1 天前AI 评分27
TPBench:面向对话压缩的转折点基准
TPBench: A Turning-Point Benchmark for Dialogue Compression
AI 导读
研究者提出 TPBench,用于评估对话压缩中的"转折点驱逐"失败:压缩器可能保留事实却丢掉改变事实的那一轮对话。TPBench 在相同名义保留预算下评测三个信息目标,P1 为用户初始目标,P2 为用户修改后槽位的当前值,P3 为两者兼有,答案取自 MultiWOZ 与 SGD 的人工对话状态标注。
来源:arXiv cs.CL · arxiv.org