跳到正文
arXiv cs.CL· Shaked Goldshtein, Yitzchak Grunbaum, Fabrizio Frasca, Guy Bar-Shalom, Haggai Maron·· 5 小时前AI 评分29

GURI:用 token 身份信息做 LLM 灰盒幻觉检测

Gray-Box Hallucination Detection in LLMs with Token Identities

AI 导读

研究者提出灰盒幻觉检测器 GURI,将候选 token 概率与逐 token 向量标识结合,让检测器不仅知道模型有多不确定,还知道它在哪些候选词之间犹豫。在三个开源权重模型和三个问答基准上,GURI 将平均测试 ROC-AUC 从 72.09% 提升至 79.09%;在闭源 GPT-4.1 上从 67.39% 提升至 71.84%。

来源:arXiv cs.CL · arxiv.org