跳到正文
arXiv cs.AI· Yuan Feng, Qize Yang, Ruizhe Chen, Sibo Song, Haolin He, Muzhi Zhu, Zihan Liu, Yunfei Chu, Xize Cheng, Yuxuan Wang, Jin Xu, Xike Xie·· 9 小时前AI 评分37

VisionWeave:让弹性视觉表征成为 MLLM 的原生能力

VisionWeave: Weaving Elastic Visual Representations as a Native Capability of MLLMs

AI 导读

VisionWeave 通过门控空间池化器与粒度路由器,让 MLLM 端到端学习按内容自适应分配视觉 token 粒度。基于 Qwen3.8-27B,它在八个基准上平均节省 43.0% token 并保留 98.9% 原生性能,而固定 50% 节省目标的 token 剪枝基线仅保留 88%。部署于 SGLang 后吞吐提升 2.3 倍,平均 TTFT 降低 54.4%、TPOT 降低 60.6%。

来源:arXiv cs.AI · arxiv.org