CASCADE-Net: A Hierarchical Arbitration Framework for Multimodal Sentiment Analysis via Perceptual Cue Decoupling

情绪分析 解耦(概率) 感知 计算机科学 人工智能 仲裁 自然语言处理 语音识别 机器学习 模式识别(心理学) 情感计算 语用学
作者
Shanliang Yang,Hao Wang,Yu Kun,Lei Wang,Cong Liu,Tao Wang,Jiebing You,Erik Cambria
出处
期刊:IEEE Transactions on Affective Computing [Institute of Electrical and Electronics Engineers]
卷期号:: 1-15
标识
DOI:10.1109/taffc.2026.3753339
摘要

Multimodal sentiment analysis seeks to emulate human-like comprehension by integrating cues from language, vision, and acoustics. However, existing models often grapple with two critical limitations: a failure to distinguish between dominant explicit sentiments and subtle implicit undertones, and an inability to robustly arbitrate the resulting inter-modal conflicts. To bridge this gap, we propose CASCADE-Net (Conflict-Aware Signal Cue Arbitration and DEcoupling Network), a novel hierarchical arbitration framework. CASCADE-Net is built upon two core components. First, a Perceptual Cue Decoupling (PCD) module employs a constrained dual-channel architecture to disentangle each modality's features into explicit and implicit representations. Second, and central to our framework, is the Cascaded Arbitration (CA) module, which introduces a predictive arbitration mechanism. It trains auxiliary predictors to forecast one modality's explicit cues from another's implicit cues, generating a quantifiable conflict signal from the prediction discrepancy. This signal then dynamically modulates a cascaded attention process, which first forms a preliminary judgment on explicit cues and then leverages the conflict signal to adaptively arbitrate and integrate implicit cues for a refined final decision. Extensive experiments on four benchmark datasets validate CASCADE-Net, which attains state-of-the-art Acc-2 of 85.84%, 85.92%, 81.15%, and 81.68% on CMU-MOSI, CMU-MOSEI, CH-SIMS, and CH-SIMS v2.0, respectively. On the conflict-rich CH-SIMS v2.0 benchmark, it exceeds the strongest baseline by 1.15 percentage points in Acc-2, confirming its effectiveness in handling complex, conflict-rich affective states.
最长约 10秒,即可获得该文献文件

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
kuba发布了新的文献求助10
1秒前
licuhnol完成签到,获得积分20
1秒前
2秒前
柔弱烧鹅完成签到,获得积分10
3秒前
斯文败类的应助被夏诗婷采纳,获得10
3秒前
否决权完成签到,获得积分10
3秒前
DW的应助被顺心的星月采纳,获得10
3秒前
大白兔完成签到 ,获得积分10
3秒前
秋秋发布了新的文献求助10
4秒前
爱火未灭完成签到,获得积分10
4秒前
所所的应助被哈哈采纳,获得10
4秒前
Emily完成签到,获得积分20
5秒前
YaoHui完成签到,获得积分10
7秒前
7秒前
莱特昊完成签到,获得积分10
7秒前
7秒前
这么近那么远完成签到,获得积分20
8秒前
丁丁当当发布了新的文献求助10
8秒前
Yurmas完成签到,获得积分10
9秒前
啦你完成签到 ,获得积分10
10秒前
10秒前
11秒前
molihuakai的应助被yz123采纳,获得10
11秒前
吉吉国王完成签到 ,获得积分10
11秒前
YaoHui发布了新的文献求助10
12秒前
大模型的应助被小燕尾条采纳,获得10
13秒前
zhu发布了新的文献求助10
13秒前
情怀的应助被咎如天采纳,获得10
13秒前
molihuakai的应助被HJH采纳,获得10
13秒前
14秒前
14秒前
14秒前
啦啦啦发布了新的文献求助10
15秒前
LIGE发布了新的文献求助10
16秒前
16秒前
虎虎发布了新的文献求助10
17秒前
Dht完成签到,获得积分10
18秒前
的法国队发布了新的文献求助10
19秒前
wsx4321发布了新的文献求助10
20秒前
21秒前
高分求助中
(应助此贴封号)【重要!!请各用户(尤其是新用户)详细阅读】【科研通的精品贴汇总】 10000
拉伸高分子熔体中缠结行为的模拟和小角中子散射研究 1700
奈特基础组织学:配套组织病理学(第4版)(Netter's Essential Histology With Correlated Histopathology) 800
John McDowells Bildungstheorie 800
八旗制度の研究 600
plantTFDB 508
Resource Recovery Handbook 500
热门求助领域 (近24小时)
化学 材料科学 医学 生物 纳米技术 计算机科学 工程类 有机化学 化学工程 生物化学 物理 复合材料 内科学 催化作用 光电子学 人工智能 细胞生物学 无机化学 物理化学 数学
热门帖子
关注 科研通微信公众号,转发送积分 8175142
求助须知:如何正确求助?哪些是违规求助? 9566928
关于积分的说明 21789123
捐赠科研通 7769522
什么是DOI,文献DOI怎么找? 3431822
关于科研通互助平台的介绍 2556078
邀请新用户注册赠送积分活动 2477222