跳到正文
arXiv cs.CV· Kevin Stephen, Varun Menon, Timo Mertens, Nikita Drobyshev·· 4 小时前AI 评分24

PVSync:统一唇形同步专家,兼顾时序与发音评分

PVSync: A Unified Lip-Sync Expert for Timing and Articulation

AI 导读

PVSync 是一个统一模型,同时完成音视频偏移估计与音素级发音评分,通过窗口级对比学习实现同步,并用音素级发音目标对齐同一 viseme 类别的音视频嵌入。

来源:arXiv cs.CV · arxiv.org