Rubric Dropout 缓解奖励黑客
热点事件持续更新
Rubric Dropout 缓解奖励黑客
1 篇报道1 个报道来源4 小时前更新
先了解这件事
AI 综述
Minglai Yang 等作者提出 Rubric Dropout,用于缓解 rubric-as-reward 强化学习中策略钻评分标准空子(奖励黑客)的问题:每步训练随机移除部分 rubric 评分标准,同一 prompt 的响应仍用同一子集打分以保证奖励可比,评估时始终使用完整 rubric。 作者称该方法将 gold judge 在分布外基准上的得分提升最多 3%(HealthBench-Hard)和 7%(ResearchQA),域内奖励与基线接近,30%–50% 的丢弃率效果最好。
AI 根据报道生成 · 3 小时前更新
最新进展10月15日 12:00
Rubric Dropout:用评分标准随机丢弃缓解 rubric-as-reward RL 中的奖励黑客报道时间线
沿着报道,了解事件的不同侧面。
10月15日
- arXiv cs.CLRubric Dropout:用评分标准随机丢弃缓解 rubric-as-reward RL 中的奖励黑客
针对 rubric-as-reward 强化学习中策略学会钻评分标准空子的问题,研究者提出 Rubric Dropout:每步训练随机移除部分 rubric 评分标准,同一 prompt 的响应仍用同一子集打分以保证奖励可比,评估时始终使用完整 rubric。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。