arXiv cs.LG· Yongsheng Luo, Wengan He, Yu Li, Rouying Wu, Wei Lv·· 9 小时前AI 评分17
多模态几何表示中的方向依赖响应：超越扰动幅度
Beyond Perturbation Magnitude: Direction-Dependent Responses in Multimodal Geometric Representations
AI 导读
研究发现多模态几何对齐分数对模态退化的响应并非由扰动幅度主导，位移幅度最多只能解释15%的样本外方差。基于Gram行列式的闭式一阶展开，作者提出方向性几何响应（DGR），在MSR-VTT（N=878）和DiDeMo（N=980）上取得0.838-0.969的样本外R²和0.864-0.963的匹配幅度排序准确率。DGR依赖已观测的退化状态位移，属于解释性量而非部署时预测器。
来源：arXiv cs.LG · arxiv.org