跳到正文
arXiv cs.LG· Jason Jabbour, Dong-Ki Kim, Max Smith, Jay Patrikar, Radhika Ghosal, Youhui Wang, Ali Agha, Vijay Janapa Reddi, Shayegan Omidshafiei·· 7 小时前AI 评分30

剪枝会破坏 VLA 模型,但 GLUESTICK 可将其恢复

Don't Run with Scissors: Pruning Breaks VLA Models but They Can Be Recovered

AI 导读

研究发现剪枝会导致 VLA 模型性能大幅下降并增加安全违规,GLUESTICK 通过权重空间插值计算一次性校正项,无需额外训练且与剪枝算法无关。该方法在多种 VLA 架构上最多恢复 100% 成功率,安全水平接近稠密模型,同时节省最多 5 GB 内存并实现最高 1.75x 加速。

来源:arXiv cs.LG · arxiv.org