Research on Multimodal Image Fusion Target Detection Algorithm Based on Generative Adversarial Network

计算机科学 人工智能 判别式 模式识别(心理学) 目标检测 图像融合 算法 计算机视觉
作者
Zhaoli Wu,Xuehan Wu,Yuancai Zhu,Jingxuan Zhai,Haibo Yang,Zhiwei Yang,Chao Wang,Jilong Sun
出处
期刊:Wireless Communications and Mobile Computing [Wiley]
卷期号:2022: 1-10
标识
DOI:10.1155/2022/1740909
摘要

In this paper, we propose a target detection algorithm based on adversarial discriminative domain adaptation for infrared and visible image fusion using unsupervised learning methods to reduce the differences between multimodal image information. Firstly, this paper improves the fusion model based on generative adversarial network and uses the fusion algorithm based on the dual discriminator generative adversarial network to generate high-quality IR-visible fused images and then blends the IR and visible images into a ternary dataset and combines the triple angular loss function to do migration learning. Finally, the fused images are used as the input images of faster RCNN object detection algorithm for detection, and a new nonmaximum suppression algorithm is used to improve the faster RCNN target detection algorithm, which further improves the target detection accuracy. Experiments prove that the method can achieve mutual complementation of multimodal feature information and make up for the lack of information in single-modal scenes, and the algorithm achieves good detection results for information from both modalities (infrared and visible light).

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
Lorene发布了新的文献求助10
刚刚
科目三应助Yvonne采纳,获得10
1秒前
sciq完成签到,获得积分10
2秒前
2秒前
2秒前
zhdjj完成签到,获得积分10
2秒前
3秒前
Jemma31发布了新的文献求助50
3秒前
3秒前
baimafeima完成签到,获得积分10
3秒前
朝明发布了新的文献求助10
4秒前
4秒前
5秒前
5秒前
swall5w发布了新的文献求助10
5秒前
zll发布了新的文献求助10
6秒前
xjd发布了新的文献求助10
6秒前
noah发布了新的文献求助20
6秒前
巫雍完成签到,获得积分10
7秒前
温木成林完成签到,获得积分10
7秒前
旭日发布了新的文献求助10
7秒前
爱的看到完成签到,获得积分10
8秒前
8秒前
9秒前
13ones完成签到,获得积分10
9秒前
10秒前
10秒前
huangdinghuang完成签到,获得积分10
11秒前
Sunny完成签到 ,获得积分10
11秒前
ksq完成签到,获得积分10
11秒前
虚心的函发布了新的文献求助10
11秒前
11秒前
12秒前
彭于晏应助hode采纳,获得10
13秒前
ttpd完成签到,获得积分10
13秒前
人生何处不青山完成签到,获得积分10
14秒前
111发布了新的文献求助10
14秒前
orixero应助swall5w采纳,获得10
14秒前
周梦蝶发布了新的文献求助10
15秒前
15秒前
高分求助中
Overcoming Stigma and Bias in Obesity Management 800
Malcolm Fraser : a biography 700
Signals, Systems, and Signal Processing 610
Materials selection in mechanical design 500
Bounds for Statistical Estimation in Semiparametric Models 500
Climate change and sports: Statistics report on climate change and sports 500
Forced degradation and stability indicating LC method for Letrozole: A stress testing guide 500
热门求助领域 (近24小时)
化学 材料科学 医学 生物 纳米技术 工程类 有机化学 化学工程 生物化学 计算机科学 物理 内科学 复合材料 催化作用 物理化学 光电子学 电极 细胞生物学 基因 无机化学
热门帖子
关注 科研通微信公众号,转发送积分 6477427
求助须知:如何正确求助?哪些是违规求助? 8279331
关于积分的说明 17656998
捐赠科研通 5559556
什么是DOI,文献DOI怎么找? 2910834
邀请新用户注册赠送积分活动 1887790
关于科研通互助平台的介绍 1741254