跳到正文
热点事件持续更新

EconCausal基准扩展:LLM经济因果推理存意识形态偏见

2 篇报道1 个报道来源4 小时前更新

先了解这件事

AI 综述

Donggyu Lee等研究者发布 EconCausal 基准,用于检验大语言模型能否在指定情境下推断经济因果效应的方向,并随情境变化修正判断。该基准包含 10,490 条带情境标注的因果三元组,提取自 2,595 篇顶级经济与金融期刊的实证研究,数据集与基准已公开。 在此基础上,研究者将基准扩展至意识形态争议案例,从 10,490 个三元组中识别出 1,056 个干预导向(亲政府)与市场导向(亲市场)预测因果符号相反的争议实例,并评测 20 个 SOTA 大语言模型。结果显示,争议条目准确率普遍低于非争议条目;20 个模型中有 17 个在因果符号符合干预导向预期时准确率更高,出错时也更多偏向干预导向,一次性上下文提示无法消除这一偏向。

AI 根据报道生成 · 3 小时前更新

事件进展

2 个进展

  1. 10月15日 12:00 · 1 篇报道
    LLM经济因果推理意识形态偏见研究
    arXiv cs.CL:LLM 在经济因果推理中存在意识形态偏见
  2. 10月15日 12:00 · 1 篇报道
    EconCausal经济因果推理基准发布
    arXiv cs.CL:EconCausal:面向大语言模型的情境感知经济因果推理基准

报道时间线

沿着报道,了解事件的不同侧面。

10月15日
  1. arXiv cs.CL
    LLM 在经济因果推理中存在意识形态偏见

    研究将 EconCausal 基准扩展至意识形态争议案例,从 10,490 个因果三元组中识别出 1,056 个争议实例,评测 20 个 SOTA LLM 预测因果方向的能力。结果显示争议条目准确率普遍低于非争议条目,且 20 个模型中有 17 个在因果符号符合干预导向预期时准确率更高,出错时也更多偏向干预导向,一次性上下文提示无法消除这一偏向。

  2. arXiv cs.CL
    EconCausal:面向大语言模型的情境感知经济因果推理基准

    研究者发布 EconCausal,一个从 2,595 篇顶级经济与金融期刊实证研究中提取 10,490 条情境标注因果三元组的大规模基准,用于检验 LLM 能否在指定情境下推断因果效应方向并随情境变化修正判断。

本事件热度走势

可比范围当前
9
可比范围峰值
1010月15日 13:00
近 24 小时变化
–

趋势仅比较持续完整观测到的相同主体,范围可能小于当前热度统计。移动指针或点击图表查看每小时热度;键盘可用左右方向键切换。