SEMixer: Semantics Enhanced MLP-Mixer for Multiscale Mixing and Long-term Time Series Forecasting

计算机科学 语义学(计算机科学) 冗余(工程) 时间序列 钥匙(锁) 系列(地层学) 噪音(视频) 编码(集合论) 人工智能 混合(物理) 理论计算机科学 数据挖掘 数据建模 多尺度建模 依赖关系(UML) 桥接(联网) 算法 随机噪声 机器学习 源代码 辍学(神经网络) 人工神经网络 集合预报 语义数据模型 领域(数学分析)
作者
Xu Zhang,Qitong Wang,Peng Wang,Wei Wang
摘要

Modeling multiscale patterns is crucial for long-term time series forecasting (TSF). However, redundancy and noise in time series, together with semantic gaps between non-adjacent scales, make the efficient alignment and integration of multi-scale temporal dependencies challenging. To address this, we propose SEMixer, a lightweight multiscale model designed for long-term TSF. SEMixer features two key components: a Random Attention Mechanism (RAM) and a Multiscale Progressive Mixing Chain (MPMC). RAM captures diverse time-patch interactions during training and aggregates them via dropout ensemble at inference, enhancing patch-level semantics and enabling MLP-Mixer to better model multi-scale dependencies. MPMC further stacks RAM and MLP-Mixer in a memory-efficient manner, achieving more effective temporal mixing. It addresses semantic gaps across scales and facilitates better multiscale modeling and forecasting performance. We not only validate the effectiveness of SEMixer on 10 public datasets, but also on the \textit{2025 CCF AlOps Challenge} based on 21GB real wireless network data, where SEMixer achieves third place. The code is available at the link https://github.com/Meteor-Stars/SEMixer.
最长约 10秒,即可获得该文献文件

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
淡定的勒完成签到,获得积分10
刚刚
ding的应助被白兔采纳,获得10
2秒前
苗苗的应助被Jjjjj采纳,获得10
2秒前
2秒前
2秒前
3秒前
苗苗的应助被alexyang采纳,获得10
4秒前
马吉克完成签到,获得积分20
5秒前
tctianna发布了新的文献求助10
5秒前
5秒前
吊炸天发布了新的文献求助10
5秒前
蓝天发布了新的文献求助10
6秒前
6秒前
xjm完成签到,获得积分20
6秒前
7秒前
丘比特的应助被小瑜同学采纳,获得10
8秒前
康轩铭关注了科研通微信公众号
8秒前
Thrain发布了新的文献求助10
8秒前
9秒前
9秒前
菠萝吹雪发布了新的文献求助30
10秒前
10秒前
mafumafu完成签到,获得积分10
10秒前
11秒前
11秒前
12秒前
研友_VZG7GZ的应助被Yyy采纳,获得10
12秒前
12秒前
12秒前
无色热带鱼完成签到,获得积分10
13秒前
13秒前
hzz完成签到,获得积分10
13秒前
NexusExplorer的应助被123采纳,获得10
13秒前
专注白昼发布了新的文献求助10
13秒前
14秒前
支夜白发布了新的文献求助10
14秒前
赘婿的应助被伶俐从1234采纳,获得30
14秒前
15秒前
李栖迟完成签到,获得积分10
15秒前
阿水的应助被以恒之心采纳,获得10
15秒前
高分求助中
(应助此贴封号)【重要!!请各用户(尤其是新用户)详细阅读】【科研通的精品贴汇总】 10000
Aspects of Post-SPE Phonology 2000
CODESSA 2000
Performance standards for antimicrobial disk and dilution susceptibility tests for bacteria isolated from animals 888
Rosenblum, Global Change Biology 800
Berberine regulates the TLR4 signaling pathway to suppress hypoxia-induced proliferation and migration of pulmonary arterial smooth muscle cells 530
Organizational Behavior 510
热门求助领域 (近24小时)
化学 材料科学 医学 生物 计算机科学 工程类 纳米技术 有机化学 化学工程 内科学 物理 生物化学 复合材料 催化作用 细胞生物学 人工智能 心理学 无机化学 基因 遗传学
热门帖子
关注 科研通微信公众号,转发送积分 7855259
求助须知:如何正确求助?哪些是违规求助? 9373872
关于积分的说明 20690458
捐赠科研通 7453382
什么是DOI,文献DOI怎么找? 3345239
关于科研通互助平台的介绍 2487911
邀请新用户注册赠送积分活动 2368985