跳到正文
arXiv cs.CL· Yichen Wang, Tenghao Huang, Vishakh Padmakumar, Mina Lee·· 2 小时前AI 评分27

通过长尾表现评估 LLM 创造力

Evaluating LLM Creativity through Long-Tail Performance

AI 导读

研究提出以参考输入-输出分布的长尾任务表现来形式化 LLM 创造力的共同目标,基于新颖性-质量乘积公式,用 n-gram 在预训练数据中的缺失作为新颖性代理,在 15 个基准和 26 个开源权重模型上验证。

来源:arXiv cs.CL · arxiv.org