ICLR 2024会议上，《Pathformer: Multi-scale Transformers with Adaptive Pathways for Time Series Forecasting》一文掀起了一场关于时间序列预测的新浪潮。这篇论文介绍了一种名为Pathformer的全新方法，它基于多尺度Transformer模型，通过自适应路径来处理时间序列数据，以提高预测的精确度和泛化能力。
Pathformer的核心理念是将时间序列数据按照不同的时间分辨率进行划分，采用不同大小的patches来捕捉时间序列的全局相关性和局部细节。这种方法不仅考虑了时间序列在不同时间尺度上的特征，还从时间距离的角度出发，实现了对时间序列的全面建模。这种创新性方法使得Pathformer能够更好地理解和预测时间序列数据的动态变化。
在实验方面，研究人员在十一个真实世界的数据集上进行了广泛的实验。结果显示，Pathformer不仅在所有现有模型中取得了最先进的性能，而且在各种迁移场景下展现出了更强的泛化能力。这些实验结果清晰地证明了Pathformer在时间序列预测任务中的有效性和优越性。
Pathformer的另一个亮点是其自适应路径机制。这一机制能够根据输入时间序列的不同时间动态，动态调整多尺度建模过程。这意味着Pathformer能够根据不同时间序列的特点，自适应地选择最合适的模型参数和结构，从而提高预测的准确性。
在论文审阅过程中，审稿人提出了一些建议和问题。例如，他们认为论文在介绍部分需要反映最新的实证结果，并且需要在实验中包含更多的数据集和基线比较。此外，审稿人还提到，Pathformer与之前的方法PatchTST在概念上有相似之处，但Pathformer在多尺度建模方面进行了创新，通过自适应多尺度建模、多补丁大小的划分以及全局相关性和局部细节的双重注意力机制，实现了对多尺度特征的更全面捕捉。
研究人员对审稿人的反馈作出了详细的回应。他们在修订后的论文中增加了对基准模型的讨论，扩展了数据集的覆盖范围，并与现有的方法进行了更详细的比较。他们还对Pathformer与PatchTST和NHITS等方法的区别进行了阐述，强调了Pathformer在自适应多尺度建模方面的创新性。
Pathformer作为一种创新的时间序列预测方法，通过多尺度Transformer和自适应路径机制，有效地提高了预测的准确性和泛化能力。这种方法在处理具有复杂时间动态的时间序列数据时显示出了巨大的潜力，为时间序列分析领域带来了新的研究方向。
