arXiv cs.CL· Anuj Kumar, Shintaro Ozaki, Yamuna Prasad, Katsuhiko Hayashi, Hidetaka Kamigaito, Taro Watanabe·· 2 小时前AI 评分17
AMR 解析器输出有多可靠？AMR 解析的不确定性估计研究
How Reliable are AMR Parser Outputs? Uncertainty Estimation for AMR Parsing
AI 导读
一项研究首次在黑盒设定下用 top-k 波束搜索候选对 AMR 解析器进行不确定性估计，通过候选两两相似度计算不确定性，并用 Prediction Rejection Ratio 评估。研究刻画了解析性能与不确定性的关系，评估了波束候选分布的可靠性，并分析了评测指标对不确定性评估的影响，识别出性能与可靠性平衡最佳的解析器。
来源：arXiv cs.CL · arxiv.org