跳到正文
热点事件持续更新

研究者发布北极科学弃答数据集与基准

1 篇报道1 个报道来源3 小时前更新

先了解这件事

AI 综述

研究者发布 ArcticQA 数据集与 ArcticAbstain 基准,用于评估大语言模型在北极科学多选题中,当没有正确答案时是否会选择弃答。 ArcticQA 包含 194 道源自北极研究的题目,并对答案支持与干扰项矛盾进行自动校验;ArcticAbstain 则对比答案存在与答案缺失两种条件。该成果由 Benjamin Wilcox 等作者发布。

AI 根据报道生成 · 2 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月8日
  1. arXiv cs.CL
    ArcticQA:面向 LLM 北极科学弃答的数据集与基准

    研究者发布 ArcticQA 数据集与 ArcticAbstain 基准,用于评估 LLM 在北极科学多选题中"无正确答案时是否弃答"。ArcticQA 含 194 道源自北极研究的题目,并自动校验答案支持与干扰项矛盾;ArcticAbstain 对比答案存在与缺失两种条件。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。