跳到正文
arXiv cs.LG· Fangzhou Lin, Dengzhe Hou, Yinxing Li, Kazunori D Yamada·· 7 小时前AI 评分22

为什么线性模型在复杂多变的世界中依然有效

Why Linear Models Can Still Work in a Complex and Changing World

AI 导读

一篇 arXiv 论文指出,当世界复杂度超过有限且部分观测数据所能可靠学习的复杂度时,线性模型在新环境中反而可能比灵活的非线性模型预测误差更低。论文通过 Proposition 1 给出平方误差情形下的证明,并关联偏差方差、正则化、分布偏移、不变性与欠指定等研究,提出模型复杂度应依据跨环境稳定性而非仅训练数据精度来选择。

来源:arXiv cs.LG · arxiv.org