arXiv cs.CL· Juan Terven, Diana-Margarita C\'ordova-Esparza, Ruben Gomez, Carlos Miranda Rocha, Julio-Alejandro Romero-Gonz\'alez, Edgar Chavez-Urbiola·· 2 小时前AI 评分24
语言模型能否学会何时拒答?策略学习与校准答案选择
Can Language Models Learn When to Abstain? Policy Learning and Calibrated Answer Selection
AI 导读
在 Qwen3-14B 上,学习式答案选择器在 TriviaQA 上把平均覆盖率从 20.2% 提升到 30.9%,同时将已评分答案的合并错误率从 23.0% 降至 14.5%(exact-match 评分)。测试的强化学习改动未带来一致增益;在 NQ-Open 上该选择器虽优于校准置信度过滤,但仍不如始终拒答。结果表明该设定下学习选择答案有效,但跨数据集的可靠拒答仍未解决。
来源:arXiv cs.CL · arxiv.org