Text-Guided Visual Representation Learning via Cross-Modal Fusion for Person Re-Identification

计算机科学 情态动词 代表(政治) 人工智能 鉴定(生物学) 融合 模式识别(心理学) 自然语言处理 计算机视觉 机器学习 语言学 哲学 政治 生物 植物 化学 高分子化学 法学 政治学
作者
G. F. Cao,Qing Tang,Xuan-Thuy Vo,Adri Priadana,Tien-Dat Tran,Kang-Hyun Jo
出处
期刊:IEEE Access [Institute of Electrical and Electronics Engineers]
卷期号:13: 114911-114922 被引量:1
标识
DOI:10.1109/access.2025.3584377
摘要

Person Re-identification (Re-ID) aims at accurately querying pedestrians across multiple non-overlapping cameras system, playing an essential role in computer vision applications. While CNN-based methods leverage feature aggregation and attention mechanisms to achieve competitive performance, their limitations in capturing long-range dependencies have motivated the research of transformer-based architectures, which excel in the evolution of person Re-ID research. Despite leveraging pretrained vision-language models to facilitate visual encoder training, current methods suffer from fragmented optimization procedures, complexity increasing, and inadequate semantic guidance from textual prompts. To address these limitations, we propose an end-to-end method named Text-Guided Fusion Transformer (TGFT). TGFT applies the fixed but semantically enriched texts to guide visual training with a novel Gated Cross Attention (GCA) fusion module. The GCA module adaptively modulates the integration of textual information and visual features, effectively enhancing cross-modal feature alignment and semantic consistency. Without significantly increasing computational complexity or parameter count, TGFT achieves superior performance, demonstrating strong effectiveness and scalability on multiple major Re-ID benchmarks.
最长约 10秒,即可获得该文献文件

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
XXX发布了新的文献求助10
1秒前
李LLL发布了新的文献求助10
1秒前
默默的傲云完成签到,获得积分10
1秒前
科研通AI6应助阮婷采纳,获得10
1秒前
SN发布了新的文献求助10
1秒前
2秒前
追寻的夏波应助即墨十三采纳,获得10
2秒前
Zoey完成签到,获得积分20
3秒前
3秒前
丘比特应助君仔采纳,获得10
3秒前
科研通AI6应助揽星采纳,获得10
4秒前
乔杰发布了新的文献求助10
4秒前
lixq完成签到,获得积分20
4秒前
完美世界应助不安万声采纳,获得10
5秒前
han发布了新的文献求助10
5秒前
一颗卷心菜完成签到 ,获得积分10
6秒前
李健应助read采纳,获得10
6秒前
6秒前
图图完成签到,获得积分10
7秒前
嘻嘻嘻发布了新的文献求助10
7秒前
在巨人的肩膀上眺望远方完成签到,获得积分10
8秒前
8秒前
奋斗甜瓜发布了新的文献求助10
8秒前
汉堡包应助科研通管家采纳,获得10
8秒前
今后应助科研通管家采纳,获得10
9秒前
无花果应助科研通管家采纳,获得10
9秒前
郗关塚完成签到,获得积分10
9秒前
科研通AI2S应助科研通管家采纳,获得10
9秒前
9秒前
搜集达人应助科研通管家采纳,获得10
9秒前
Hello应助科研通管家采纳,获得10
9秒前
小马甲应助科研通管家采纳,获得10
9秒前
Owen应助科研通管家采纳,获得10
9秒前
pluto应助科研通管家采纳,获得10
9秒前
老福贵儿应助科研通管家采纳,获得10
10秒前
英姑应助科研通管家采纳,获得10
10秒前
orixero应助科研通管家采纳,获得10
10秒前
852应助科研通管家采纳,获得10
10秒前
烟花应助科研通管家采纳,获得10
10秒前
科研通AI6应助科研通管家采纳,获得30
10秒前
高分求助中
(应助此贴封号)【重要!!请各用户(尤其是新用户)详细阅读】【科研通的精品贴汇总】 10000
Encyclopedia of Reproduction Third Edition 3000
《药学类医疗服务价格项目立项指南(征求意见稿)》 1000
花の香りの秘密―遺伝子情報から機能性まで 800
1st Edition Sports Rehabilitation and Training Multidisciplinary Perspectives By Richard Moss, Adam Gledhill 600
nephSAP® Nephrology Self-Assessment Program - Hypertension The American Society of Nephrology 500
Digital and Social Media Marketing 500
热门求助领域 (近24小时)
化学 材料科学 生物 医学 工程类 计算机科学 有机化学 物理 生物化学 纳米技术 复合材料 内科学 化学工程 人工智能 催化作用 遗传学 数学 基因 量子力学 物理化学
热门帖子
关注 科研通微信公众号,转发送积分 5626590
求助须知:如何正确求助?哪些是违规求助? 4712464
关于积分的说明 14959700
捐赠科研通 4782280
什么是DOI,文献DOI怎么找? 2554444
邀请新用户注册赠送积分活动 1516118
关于科研通互助平台的介绍 1476399