arXiv cs.LG· Yanlong Chen, Yining Chen, Song Zhang, Amirhossein Habibian, Yawei Li·· 7 小时前AI 评分22
PrismQuant:面向分组量化器的最优零空间旋转
PrismQuant: Optimal Null-Space Rotations for Grouped Quantizers
AI 导读
PrismQuant 是一种量化器感知的旋转框架,通过将激活主特征空间与非对称分组 INT4 的常量组子空间对齐,把旋转设计建模为 Ky Fan 迹最大化并给出可证明最优的闭式解。
来源:arXiv cs.LG · arxiv.org