跳到正文
热点事件持续更新

研究:内部激活探针检测金融问答幻觉

1 篇报道1 个报道来源4 小时前更新

先了解这件事

AI 综述

一项新研究提出用模型内部激活的线性探针检测金融问答中的“自信幻觉”,即模型答错却表现自信。研究在 FinQA 和 TAT-QA 数据集上训练残差流线性探针,并在 Qwen3-8B、Llama-3.1-8B 和 Gemma-2-9B 三个模型上测试。 结果显示,探针检测自信幻觉的 AUROC 为 0.68–0.77,高于 token log-probabilities 和模型自评等输出层基线的 0.55–0.63。作者 Richard Zhe Wang 称,研究关注的是内部激活能否可靠检测这类错误,以及是否携带输出层置信信号之外的信息。

AI 根据报道生成 · 3 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月15日
  1. arXiv cs.CL
    金融问答中 LLM 自信幻觉的检测:基于内部激活的线性探针研究

    针对 LLM 在金融问答中"自信答错"的问题,研究在 FinQA 和 TAT-QA 上训练残差流线性探针检测幻觉。在 Qwen3-8B、Llama-3.1-8B 和 Gemma-2-9B 上,探针检测自信幻觉的 AUROC 达 0.68-0.77,显著优于 token log-probabilities 和模型自评等输出层基线(0.55-0.63)。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。