arXiv cs.AI· Shuyue Stella Li, Jacqueline He, Jiahui Chen, Sreya Dutta Roy, Yulia Tsvetkov, Luke Zettlemoyer, Marjan Ghazvininejad, Xiaochuang Han·· 8 小时前AI 评分24
IsoVRBench:无需人类反馈的视频奖励建模基准
IsoVRBench: Video Reward Modeling Without Human Feedback
AI 导读
研究者提出 IsoVRBench,一个通过受控干预构建 8000 对偏好样本、覆盖八种干预的视频生成奖励建模基准,无需任何人工标注。当前最优奖励模型在帧序重排任务上仅达 60.8%,而人类为 100%,且现有基准排名无法预测这一缺陷。
来源:arXiv cs.AI · arxiv.org