Hybrid Attention Cascade Network for Facial Expression Recognition

作者
Xiaoliang Zhu,Shihao Ye,Liang Zhao,Zhicheng Dai
出处
期刊:Sensors [Multidisciplinary Digital Publishing Institute]
卷期号:21 (6): 2003-2003 被引量:39
标识
DOI:10.3390/s21062003
摘要

As a sub-challenge of EmotiW (the Emotion Recognition in the Wild challenge), how to improve performance on the AFEW (Acted Facial Expressions in the wild) dataset is a popular benchmark for emotion recognition tasks with various constraints, including uneven illumination, head deflection, and facial posture. In this paper, we propose a convenient facial expression recognition cascade network comprising spatial feature extraction, hybrid attention, and temporal feature extraction. First, in a video sequence, faces in each frame are detected, and the corresponding face ROI (range of interest) is extracted to obtain the face images. Then, the face images in each frame are aligned based on the position information of the facial feature points in the images. Second, the aligned face images are input to the residual neural network to extract the spatial features of facial expressions corresponding to the face images. The spatial features are input to the hybrid attention module to obtain the fusion features of facial expressions. Finally, the fusion features are input in the gate control loop unit to extract the temporal features of facial expressions. The temporal features are input to the fully connected layer to classify and recognize facial expressions. Experiments using the CK+ (the extended Cohn Kanade), Oulu-CASIA (Institute of Automation, Chinese Academy of Sciences) and AFEW datasets obtained recognition accuracy rates of 98.46%, 87.31%, and 53.44%, respectively. This demonstrated that the proposed method achieves not only competitive performance comparable to state-of-the-art methods but also greater than 2% performance improvement on the AFEW dataset, proving the significant outperformance of facial expression recognition in the natural environment.

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
R1完成签到,获得积分10
刚刚
koi完成签到,获得积分10
1秒前
sandwich完成签到 ,获得积分10
1秒前
1秒前
Cecilia0928完成签到,获得积分10
3秒前
听风雨完成签到 ,获得积分10
3秒前
新晋老板完成签到,获得积分10
3秒前
lly完成签到,获得积分10
4秒前
刘猴完成签到 ,获得积分10
4秒前
雯静的赵完成签到,获得积分10
4秒前
温乘云完成签到,获得积分10
5秒前
gongmeng完成签到 ,获得积分10
5秒前
Lonnie完成签到,获得积分10
5秒前
YY完成签到 ,获得积分10
5秒前
sophia完成签到,获得积分10
5秒前
有米饭没完成签到 ,获得积分10
5秒前
雨的印记完成签到 ,获得积分10
6秒前
跳跃猫咪完成签到 ,获得积分10
7秒前
Y_发布了新的文献求助20
7秒前
Emily完成签到,获得积分0
7秒前
咸鱼完成签到,获得积分10
7秒前
yunian完成签到 ,获得积分10
8秒前
lx完成签到,获得积分10
8秒前
大漂亮完成签到,获得积分10
8秒前
张思哲完成签到,获得积分10
8秒前
00001完成签到,获得积分10
9秒前
小蘑菇的应助被远方采纳,获得10
9秒前
9秒前
wanci的应助被刘猴采纳,获得10
9秒前
叶泽完成签到,获得积分10
9秒前
iOhyeye23完成签到 ,获得积分10
9秒前
许多多完成签到,获得积分10
10秒前
10秒前
郑成功完成签到,获得积分10
12秒前
12秒前
杰杰小杰发布了新的文献求助10
12秒前
wangyaofeng完成签到,获得积分10
12秒前
拿荷叶的火炬完成签到 ,获得积分10
12秒前
青木聪聪完成签到,获得积分10
13秒前
厄尔尼诺完成签到,获得积分10
13秒前
高分求助中
(应助此贴封号)【重要!!请各用户(尤其是新用户)详细阅读】【科研通的精品贴汇总】 10000
拉伸高分子熔体中缠结行为的模拟和小角中子散射研究 1700
The World Atlas of Wine 9th edition 1000
奈特基础组织学:配套组织病理学(第4版)(Netter's Essential Histology With Correlated Histopathology) 800
John McDowells Bildungstheorie 800
Social Psychology in the Real World 600
八旗制度の研究 600
热门求助领域 (近24小时)
化学 材料科学 医学 生物 纳米技术 计算机科学 工程类 有机化学 化学工程 生物化学 物理 复合材料 内科学 催化作用 光电子学 人工智能 细胞生物学 无机化学 物理化学 数学
热门帖子
关注 科研通微信公众号,转发送积分 8180135
求助须知:如何正确求助?哪些是违规求助? 9570290
关于积分的说明 21809391
捐赠科研通 7776237
什么是DOI,文献DOI怎么找? 3433266
关于科研通互助平台的介绍 2557465
邀请新用户注册赠送积分活动 2479039