Learning Prompt-Enhanced Context Features for Weakly-Supervised Video Anomaly Detection

异常检测 计算机科学 背景(考古学) 人工智能 模式识别(心理学) 上下文模型 计算机视觉 生物 古生物学 对象(语法)
作者
Yujiang Pu,Xiaoyu Wu,Lulu Yang,Shengjin Wang
出处
期刊:IEEE transactions on image processing [Institute of Electrical and Electronics Engineers]
卷期号:33: 4923-4936 被引量:148
标识
DOI:10.1109/tip.2024.3451935
摘要

Weakly supervised video anomaly detection aims to locate abnormal activities in untrimmed videos without the need for frame-level supervision. Prior work has utilized graph convolution networks or self-attention mechanisms alongside multiple instance learning (MIL)-based classification loss to model temporal relations and learn discriminative features. However, these approaches are limited in two aspects: 1) Multi-branch parallel architectures, while capturing multi-scale temporal dependencies, inevitably lead to increased parameter and computational costs. 2) The binarized MIL constraint only ensures the interclass separability while neglecting the fine-grained discriminability within anomalous classes. To this end, we introduce a novel WS-VAD framework that focuses on efficient temporal modeling and anomaly innerclass discriminability. We first construct a Temporal Context Aggregation (TCA) module that simultaneously captures local-global dependencies by reusing an attention matrix along with adaptive context fusion. In addition, we propose a Prompt-Enhanced Learning (PEL) module that incorporates semantic priors using knowledge-based prompts to boost the discrimination of visual features while ensuring separability across anomaly subclasses. The proposed components have been validated through extensive experiments, which demonstrate superior performance on three challenging datasets, UCF-Crime, XD-Violence and ShanghaiTech, with fewer parameters and reduced computational effort. Notably, our method can significantly improve the detection accuracy for certain anomaly subclasses and reduced the false alarm rate. Our code is available at: https://github.com/yujiangpu20/PEL4VAD.
最长约 10秒,即可获得该文献文件

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
Zhoushuang完成签到,获得积分10
1秒前
1秒前
1秒前
马宇飞发布了新的文献求助10
1秒前
BEMJ发布了新的文献求助10
2秒前
Wang发布了新的文献求助10
2秒前
dwass完成签到,获得积分10
2秒前
2秒前
2秒前
褚褚完成签到,获得积分10
2秒前
可爱的函函的应助被tang采纳,获得30
3秒前
沉静白凡完成签到,获得积分10
3秒前
dj完成签到,获得积分10
3秒前
小马甲的应助被Lee采纳,获得10
3秒前
zdx完成签到,获得积分10
4秒前
Jyouang发布了新的文献求助10
4秒前
一百完成签到,获得积分10
4秒前
qq完成签到,获得积分10
5秒前
莽兽鳞上最黑的皮完成签到,获得积分10
5秒前
5秒前
Gabriel1116发布了新的文献求助10
5秒前
科研通AI65的应助被xh采纳,获得10
6秒前
秋风的应助被yj采纳,获得10
6秒前
6秒前
WLM发布了新的文献求助10
6秒前
小魏小魏发布了新的文献求助10
6秒前
6秒前
6秒前
Sandclub发布了新的文献求助10
6秒前
ding的应助被Code_king采纳,获得50
6秒前
无限的鸵鸟完成签到,获得积分20
7秒前
7秒前
小鹿5460的应助被科研通管家采纳,获得10
7秒前
爆米花的应助被科研通管家采纳,获得10
7秒前
ding的应助被科研通管家采纳,获得10
7秒前
斯文败类的应助被科研通管家采纳,获得10
7秒前
爆米花的应助被科研通管家采纳,获得10
7秒前
YYBAS完成签到,获得积分10
7秒前
7秒前
DW的应助被xxxxxxzz采纳,获得10
7秒前
高分求助中
(应助此贴封号)【重要!!请各用户(尤其是新用户)详细阅读】【科研通的精品贴汇总】 10000
拉伸高分子熔体中缠结行为的模拟和小角中子散射研究 1700
奈特基础组织学:配套组织病理学(第4版)(Netter's Essential Histology With Correlated Histopathology) 800
John McDowells Bildungstheorie 800
八旗制度の研究 600
plantTFDB 508
Resource Recovery Handbook 500
热门求助领域 (近24小时)
化学 材料科学 医学 生物 纳米技术 计算机科学 工程类 有机化学 化学工程 生物化学 物理 复合材料 内科学 催化作用 光电子学 人工智能 细胞生物学 无机化学 物理化学 数学
热门帖子
关注 科研通微信公众号,转发送积分 8175943
求助须知:如何正确求助?哪些是违规求助? 9567501
关于积分的说明 21793186
捐赠科研通 7770490
什么是DOI,文献DOI怎么找? 3431935
关于科研通互助平台的介绍 2556294
邀请新用户注册赠送积分活动 2477485