跳到正文
热点事件持续更新

免训练Token压缩新方法利用视频编码信息

1 篇报道1 个报道来源1 小时前更新

先了解这件事

AI 综述

研究者提出一种视频编解码引导的免训练 token 压缩方法,用于视频大语言模型(VLLM)。该方法把压缩视频中已有的编码信息当作低成本搜索先验,将参考帧依赖、运动向量和残差对齐到视觉 token 网格,从而减少 token 保护与跨帧时序合并所需的视觉特征比较。 在三个代表性 VLLM 和四个视频理解基准上,该方法性能与免训练 SOTA 基线 FlashVID 相当,部分设置下更优,同时大幅降低特征比较开销。

AI 根据报道生成 · 58 分钟前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月12日
  1. arXiv cs.CV
    视频编解码引导的 VLLM 免训练 token 压缩方法

    研究者提出一种视频编解码引导的免训练 token 压缩方法,利用压缩视频中已有的编码信息作为低成本搜索先验,将参考帧依赖、运动向量和残差对齐到视觉 token 网格,从而减少 token 保护与跨帧时序合并所需的视觉特征比较。在三个代表性 VLLM 和四个视频理解基准上,该方法性能与免训练 SOTA 基线 FlashVID 相当,部分设置下更优,同时大幅降低特征比较开销。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。