跳到正文
arXiv cs.CL· Palvika Bansal, Rittika Jindal, Ruichong Wang·· 5 小时前AI 评分37

强 harness 缩小模型差距:立法文档转 XML 的对比评测

A Strong Harness Narrows the Model Gap: A Comparative Evaluation for Legislative Document-to-XML Conversion

AI 导读

一项工业级流水线将美国州立法文档转换为严格 schema 约束的 XML,其准确率主要来自 harness 工程而非模型本身。在 153 份金标准法案上,三个 harness 与三个 Claude 模型交叉消融显示,完整流水线中最弱模型(0.948)反超零样本下最强模型(0.806),p 小于 0.001。

来源:arXiv cs.CL · arxiv.org