跳到正文
arXiv cs.LG· Priya Kasimbeg (Alice), Ahmed Khaled (Alice), Aahlad Chandrabhatta (Alice), Yifan Wang (Alice), Andy Liu (Alice), Niccol\`o Ajroldi (Alice), David Tweedle (Alice), Xingyu (Alice), Yang, Isaac Patole, Frank Schneider, George E. Dahl·· 7 小时前AI 评分22

AlgoPerf V1 基准更新:Schedule-Free AdamW 在自调参规则下排名第一

Towards Easier-to-Tune Training Algorithms: New Results from AlgoPerf

AI 导读

更新后的 AlgoPerf V1 基准在固定硬件上以 wall-clock time-to-target 评测了 9 项工作负载,在 PyTorch 和 JAX 的 13 份提交中,Schedule-Free AdamW 在自调参规则集下排名第一。

来源:arXiv cs.LG · arxiv.org