FinGREAT金融图谱基准发布并评估大模型
热点事件持续更新
FinGREAT金融图谱基准发布并评估大模型
1 篇报道1 个报道来源6 小时前更新
先了解这件事
AI 综述
Ashman Mehra等作者发布FinGREAT基准,用于评估开放权重大语言模型能否从财务披露文本中抽取并分类复式记账关系证据。测试覆盖5个开放权重模型家族、1,300份SEC 10-K Item 7文件及26年跨度,并与3个专有模型对比。 研究同时发布含483段文本的人工标注关系分类基准,覆盖三类财务会计类别,评测34个开放权重和10个专有模型。结果显示,最强开放权重模型准确率为84.1%,专有模型为92.8%。
AI 根据报道生成 · 2 小时前更新
最新进展10月15日 12:00
FinGREAT:评估 LLM 在金融图谱引导的检索与类型识别上的表现报道时间线
沿着报道,了解事件的不同侧面。
10月15日
- arXiv cs.LGFinGREAT:评估 LLM 在金融图谱引导的检索与类型识别上的表现
FinGREAT 基准评估开放权重 LLM 能否从财务披露文本中抽取并分类复式记账关系证据,测试覆盖 5 个开放权重家族的模型、1,300 份 SEC 10-K Item 7 文件及 26 年跨度,并与 3 个专有模型对比。研究还发布含 483 段文本的人工标注关系分类基准,评测 34 个开放权重和 10 个专有模型,最强开放权重与专有模型准确率分别为 84.1% 和 92.8%。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。