arXiv cs.AI· Aotian Chen, Frazier N. Baker, Reza Averly, Shan Zhang, Tianao Chen, Daniel Adu-Ampratwum, Xia Ning, Yuan Xue·· 8 小时前AI 评分29
ChemExplain:面向解释性化学推理的多模态基准
ChemExplain: A Multimodal Benchmark for Explanatory Chemical Reasoning
AI 导读
研究者推出 ChemExplain,一个从 383 篇同行评审论文中提取 1,180 道多选题的化学基准,每题给出分子或反应图像、观测到的化学效应及四个对应不同结构特征的解释选项,要求模型完成"解释性归因"。基准由多智能体框架自动构建并经八位化学专家验证,最强模型准确率仅 78.6%;在 600 题专家复核子集上,该模型 71.4% 的错误被归类为归因失败。
来源:arXiv cs.AI · arxiv.org