已入深夜,您辛苦了!由于当前在线用户较少,发布求助请尽量完整地填写文献信息,科研通机器人24小时在线,伴您度过漫漫科研夜!祝你早点完成任务,早点休息,好梦!

HitBack: Transformer With Hierarchical-Semantic Cross Attention and Background Contrast for Weakly Supervised Wildlife Semantic Segmentation

计算机科学 分割 人工智能 快照(计算机存储) 注释 水准点(测量) 对比度(视觉) 人口 机器学习 最小边界框 语义学(计算机科学) 图像分割 变压器 目标检测 抓住 跳跃式监视 数据挖掘 一致性(知识库) 模式识别(心理学) 边距(机器学习)
作者
Puxuan Xie,Wei Zhuo,Xinshao Wang,Songhe Deng,Weizhao He,Linlin Shen
出处
期刊:IEEE Transactions on Multimedia [Institute of Electrical and Electronics Engineers]
卷期号:28: 2363-2377
标识
DOI:10.1109/tmm.2026.3651016
摘要

Monitoring wildlife behavior and population changes is critical for conservation efforts. However, specialized analysis of large volumes of wildlife images is extremely chal lenging, necessitating the use of artificial intelligence techniques to automatically detect, segment, and classify species captured by trap cameras. Despite the increasing use of AI in wildlife monitoring, challenges with data quality and availability persist. The Snapshot Serengeti (SS) dataset only has image-level labels and very few bounding box labels, and there's no dataset with pixel-level labels due to the significant annotation costs. To this end, we create and release the large-scale Semantic Segmentation for Snapshots of the Serengeti (S4) dataset, consisting of 24K high-quality images across 47 species with precise masks, for both common and rare species. This dataset serves as a resource for developing semantic segmentation algorithms in wildlife studies. Additionally, we introduce HitBack, a novel method leveraging Hierarchical-Semantic Cross Attention (HCA) and Background Contrast (BC) for weakly supervised semantic segmentation (WSSS). The HCA module is used to capture both the shared and distinct features across species, and the BC module is designed to enhance foreground activation by ensuring consistency in the backgrounds. Extensive experiments on the newly proposed S4benchmark show that, our HitBack presents competitive performance when compared with the state-of-the-art models. The mIoU of HitBack is +10.4%, +14.7%, and +18.4% higher than that of ToCo, SIPE, and MCTformer, respectively. In addition, our HitBack even obtains performance that surpasses the fully supervised and semi-supervised methods when annotation data is limited. Code and datasets will be available at Github.

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
花花完成签到 ,获得积分10
1秒前
Dave发布了新的文献求助10
2秒前
江小江完成签到,获得积分10
2秒前
充电宝的应助被硕大的肌肉采纳,获得10
3秒前
3秒前
Ava的应助被why采纳,获得10
3秒前
CAOHOU的应助被郭益通采纳,获得20
4秒前
4秒前
伶俐越泽发布了新的文献求助10
4秒前
Jasper的应助被yyds采纳,获得30
6秒前
bkagyin的应助被缺口口采纳,获得10
6秒前
灞波儿奔的应助被一锅炖不下采纳,获得10
6秒前
含蓄凡白完成签到 ,获得积分10
10秒前
huifeideyu发布了新的文献求助10
10秒前
tietie完成签到,获得积分20
10秒前
天青色发布了新的文献求助10
12秒前
12秒前
machine完成签到 ,获得积分10
13秒前
丘比特的应助被白白采纳,获得10
14秒前
lhm驳回了情怀的应助
15秒前
wanci的应助被why采纳,获得10
15秒前
阿三发布了新的文献求助10
15秒前
cgq完成签到,获得积分10
15秒前
16秒前
16秒前
16秒前
上官若男的应助被霏霏采纳,获得10
16秒前
17秒前
亚胺培南西司他丁钠完成签到,获得积分20
18秒前
18秒前
小马甲的应助被月下思文采纳,获得10
18秒前
小白完成签到,获得积分10
18秒前
19秒前
Cheng完成签到,获得积分10
19秒前
青梧完成签到 ,获得积分10
20秒前
20秒前
猫猫猫发布了新的文献求助10
22秒前
老王发布了新的文献求助10
22秒前
yyds发布了新的文献求助30
23秒前
Ming发布了新的文献求助10
24秒前
高分求助中
(应助此贴封号)【重要!!请各用户(尤其是新用户)详细阅读】【科研通的精品贴汇总】 10000
拉伸高分子熔体中缠结行为的模拟和小角中子散射研究 1700
Grapes 1000
The World Atlas of Wine 9th edition 1000
奈特基础组织学:配套组织病理学(第4版)(Netter's Essential Histology With Correlated Histopathology) 800
John McDowells Bildungstheorie 800
八旗制度の研究 600
热门求助领域 (近24小时)
化学 材料科学 医学 生物 纳米技术 计算机科学 工程类 有机化学 化学工程 生物化学 物理 复合材料 内科学 催化作用 光电子学 人工智能 细胞生物学 无机化学 物理化学 数学
热门帖子
关注 科研通微信公众号,转发送积分 8179129
求助须知:如何正确求助?哪些是违规求助? 9569710
关于积分的说明 21806324
捐赠科研通 7774507
什么是DOI,文献DOI怎么找? 3433008
关于科研通互助平台的介绍 2556912
邀请新用户注册赠送积分活动 2478649