KD-MSA: A Multimodal Implicit Sentiment Analysis Approach Based on KAN and Asymmetric Contribution-Aware Dynamic Fusion

计算机科学 特征(语言学) 情绪分析 构造(python库) 模态(人机交互) 情态动词 编码器 模式 人工智能 模式识别(心理学) 机制(生物学) 表达式(计算机科学) 自然语言处理 语言学 社会学 哲学 操作系统 化学 高分子化学 程序设计语言 认识论 社会科学
作者
Zhiyuan Hou,Qiang Zhang,Ziwei Lei,Zheng Zeng,Ruijun Jia
出处
期刊:Symmetry [Multidisciplinary Digital Publishing Institute]
卷期号:17 (9): 1401-1401
标识
DOI:10.3390/sym17091401
摘要

Implicit emotions are often expressed through implicit and weak clues between modalities due to the lack of explicit emotional feature words, representing a significant challenge for multimodal sentiment analysis. In order to improve implicit emotion recognition, this paper proposes a multimodal sentiment analysis method that integrates KAN and the modal dynamic fusion mechanism. This method first introduces the KAN structure to construct a modal feature encoder to enhance the emotional expression ability of features. Then, the emotional contribution weight of each modality is calculated using the difference between the unimodal and multimodal sentiment scores, and the cross-attention mechanism guided by the main modality is used for feature fusion. Experiments on four datasets, CH-SIMS, CH-SIMSv2, MOSI, and MOSEI, show that the proposed method significantly outperforms the mainstream model in multiple indicators, especially when dealing with samples with implicit or ambiguous emotional expressions. The results verify the effectiveness of enhancing feature encoding capabilities and utilizing modal asymmetry information in implicit sentiment analysis.
最长约 10秒,即可获得该文献文件

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
1秒前
KKK完成签到,获得积分10
1秒前
桐桐应助yao采纳,获得10
1秒前
1秒前
高高高完成签到,获得积分10
2秒前
2秒前
静心完成签到,获得积分10
2秒前
能干的飞扬完成签到,获得积分10
2秒前
科研通AI6.4应助西瓜宝宝采纳,获得10
3秒前
Ch_7发布了新的文献求助10
3秒前
谢雷XIELei应助元谷雪采纳,获得10
3秒前
田様应助OvO采纳,获得10
3秒前
英姑应助suance采纳,获得10
3秒前
七七发布了新的文献求助10
3秒前
4秒前
lllll发布了新的文献求助10
4秒前
古月完成签到 ,获得积分10
4秒前
赘婿应助丢丢老丝采纳,获得10
4秒前
上官若男应助随风飘去25采纳,获得10
4秒前
4秒前
万能图书馆应助电麻木采纳,获得10
5秒前
天涯勿忘归完成签到,获得积分10
5秒前
五块墓碑完成签到,获得积分10
5秒前
5秒前
5秒前
星辰大海应助qkdxh采纳,获得10
5秒前
feiyang发布了新的文献求助10
5秒前
5秒前
Jaiy完成签到 ,获得积分10
5秒前
5秒前
南宫誉完成签到,获得积分10
6秒前
TanveerAhmad完成签到,获得积分10
6秒前
6秒前
6秒前
Orange应助熙悦采纳,获得10
7秒前
鹿书雪发布了新的文献求助10
7秒前
7秒前
鲤鱼紫真发布了新的文献求助10
7秒前
7秒前
志小天发布了新的文献求助10
7秒前
高分求助中
(应助此贴封号)【重要!!请各用户(尤其是新用户)详细阅读】【科研通的精品贴汇总】 10000
Industrial Hydraulics Manual (7th edition) 800
Physiologic races of the downy mildew fungus on soybeans in North Carolina 800
Rosenblum, Global Change Biology 800
Essentials of Carbohydrate Chemistry and Biochemistry, 4th Edition 800
Organizational Behavior 510
Management and the Arts 510
热门求助领域 (近24小时)
化学 材料科学 医学 生物 纳米技术 计算机科学 化学工程 工程类 有机化学 物理 复合材料 生物化学 内科学 细胞生物学 基因 遗传学 免疫学 冶金 光电子学 癌症研究
热门帖子
关注 科研通微信公众号,转发送积分 7775273
求助须知:如何正确求助?哪些是违规求助? 9317152
关于积分的说明 20355191
捐赠科研通 7361532
什么是DOI,文献DOI怎么找? 3317939
关于科研通互助平台的介绍 2466172
邀请新用户注册赠送积分活动 2333236