A Multimodal Deep Learning Approach Using Late Fusion for Pneumonia Detection Using Transfer Learning

学习迁移 计算机科学 人工智能 深度学习 机器学习 融合 哲学 语言学
作者
Devapranjal Saharia,Mihir Nighojkar,Utpal Kumar Nath,Geraldine Bessie Amali D
出处
期刊: [Institute of Electrical and Electronics Engineers]
卷期号:: 1472-1477 被引量:1
标识
DOI:10.1109/iccsp64183.2025.11088751
摘要

Pneumonia is one of the most fatal respiratory diseases, affecting a large number of people globally every year. The traditional method of pneumonia diagnosis was using chest x-ray images for detecting swelling in lower parts of lungs or detecting presence of any fluid inside lungs but sometimes these common symptoms can be confused with other diseases. Therefore, to address these challenges, modern deep learning-based solutions are emerging as promising solutions. Many existing research studies have highlighted the effectiveness of deep learning models in fields of medical imaging, showcasing the potential of CNNs for automated disease detection. This research paper explores a multimodal deep learning approach for pneumonia detection using Transfer Learning. The model, discussed here, is designed to detect pneumonia related symptoms using chest x - ray images and to observe the abnormalities in breathing sounds, indicating risk of pneumonia. This fusion of visual and acoustic features has proved to strengthen the performance of classification algorithms, making it suitable and useful for real-world clinical use cases. DenseNet121 is used as a pre-trained model for feature extraction from chest x-ray images and mel spectrograms as it outperformed other models like VGG16, VGG19, ResNet50V2, EfficientNetB4, ResNet101V2 and DenseNet201.

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
刚刚
MUMU发布了新的文献求助10
1秒前
bm023061发布了新的文献求助10
2秒前
沐风发布了新的文献求助10
2秒前
情怀的应助被枫丶采纳,获得10
3秒前
3秒前
3秒前
lishihao发布了新的文献求助10
3秒前
4秒前
4秒前
4秒前
单薄惜天完成签到 ,获得积分10
4秒前
李健的应助被沃柑采纳,获得10
5秒前
所所的应助被当康康采纳,获得10
5秒前
6秒前
Min发布了新的文献求助10
6秒前
meng发布了新的文献求助10
7秒前
YM完成签到,获得积分10
7秒前
Qin发布了新的文献求助10
7秒前
失眠孤兰发布了新的文献求助10
10秒前
辣个男人发布了新的文献求助10
11秒前
FashionBoy的应助被胡萝卜卜采纳,获得10
11秒前
11秒前
11秒前
搜集达人的应助被liugm采纳,获得10
12秒前
Hiccup完成签到,获得积分10
12秒前
bbf完成签到,获得积分10
12秒前
12秒前
慕青的应助被梦寐寤寐采纳,获得10
13秒前
老师一怒之下给我十篇nuture完成签到,获得积分10
13秒前
1111发布了新的文献求助10
13秒前
00hello00发布了新的文献求助10
13秒前
初七完成签到 ,获得积分10
14秒前
14秒前
枫丶发布了新的文献求助10
15秒前
李健的应助被Kin采纳,获得10
15秒前
科研通AI2S的应助被bfs采纳,获得10
15秒前
bm023061完成签到,获得积分20
15秒前
Broxiga完成签到,获得积分10
15秒前
小马甲的应助被积极鱼采纳,获得10
16秒前
高分求助中
(应助此贴封号)【重要!!请各用户(尤其是新用户)详细阅读】【科研通的精品贴汇总】 10000
拉伸高分子熔体中缠结行为的模拟和小角中子散射研究 2000
Handbook of Sport Coaching Research 1000
Orthognathic Surgery - 2 Volume Set 500
高分子基功能界面水蒸发材料与应用研究 500
外场增强的水汽发电研究 500
基于结构调控的功能化水诱导发电材料与器件研究 500
热门求助领域 (近24小时)
化学 材料科学 医学 生物 纳米技术 计算机科学 工程类 有机化学 化学工程 生物化学 物理 复合材料 内科学 催化作用 光电子学 人工智能 细胞生物学 无机化学 物理化学 数学
热门帖子
关注 科研通微信公众号,转发送积分 8193425
求助须知:如何正确求助?哪些是违规求助? 9579620
关于积分的说明 21866505
捐赠科研通 7793025
什么是DOI,文献DOI怎么找? 3437297
关于科研通互助平台的介绍 2560718
邀请新用户注册赠送积分活动 2484128