arXiv cs.CL· Shaked Goldshtein, Yitzchak Grunbaum, Fabrizio Frasca, Guy Bar-Shalom, Haggai Maron·· 5 小时前AI 评分29
GURI:用 token 身份信息做 LLM 灰盒幻觉检测
Gray-Box Hallucination Detection in LLMs with Token Identities
AI 导读
研究者提出灰盒幻觉检测器 GURI,将候选 token 概率与逐 token 向量标识结合,让检测器不仅知道模型有多不确定,还知道它在哪些候选词之间犹豫。在三个开源权重模型和三个问答基准上,GURI 将平均测试 ROC-AUC 从 72.09% 提升至 79.09%;在闭源 GPT-4.1 上从 67.39% 提升至 71.84%。
来源:arXiv cs.CL · arxiv.org