跳到正文
arXiv cs.CL· Van Dai Do, Huu Hiep Nguyen, Minh Hoang Nguyen, Manh Nguyen, Hung Le·· 5 小时前AI 评分27

LOTUS:通过预测未来学习理解时间序列的预训练方法

Lotus: Learning to Understand Time-series by Learning to Forecast

AI 导读

LOTUS 提出"预测锚定"(forecast grounding)预训练原则,要求语言对齐的时间序列表示在下游任务适配前保持对未来演化的预测能力。该方法将每个时间序列通道切分为不重叠的 patch 并映射到 LLM 嵌入空间,通过 LLM 隐藏状态预测下一个 patch,同时提出融合原始 patch 与频谱表示的时间-频谱 patch 表示。

来源:arXiv cs.CL · arxiv.org