arXiv cs.CV· Xiao Yang, Zekun Zhang, Yuxuan Fan, Duoxun Tang, Ziyang Liu, Dengbo He, Kaishun Wu, Jiyao Wang·· 5 小时前AI 评分22
为什么 VLM 在远程生理测量上失败?用生理接地与数值对齐重新思考
Why Do VLMs Fail at Remote Physiological Measurement? Rethinking with Physiological Grounding and Numerical Alignment
AI 导读
研究指出 VLM 做远程生理测量(RPM)存在两大瓶颈:通用视觉语义表征无法保留细粒度生理线索,自回归生成的离散 token 预测与连续数值测量天然错位。为此作者提出 VITAL 框架,保留原视觉通路用于语义理解,另设独立生理通路联合建模语义与生理信息,并用结构化数值对齐提升生成式心率估计的可靠性。
来源:arXiv cs.CV · arxiv.org