arXiv cs.AI· Lovedeep Gondara, Jekaterina Novikova, Sagarika Suresh, Jack Ji, Jithin Pradeep·· 8 小时前AI 评分29
评分格式决定 LLM 评判器能表达什么：0-100 分实际只有 7-12 个有效档位
The Format is the Filter: Scoring Format Fixes What an LLM Judge Can Express
AI 导读
研究固定候选池、评判提示词与选择预算，用三种 LLM 评判器以五种评分格式对 15,406 条 UltraFeedback 候选数据打分，微调 66 个模型并用四种评判器评估。
来源：arXiv cs.AI · arxiv.org