An Unsupervised Detection Framework for Chinese Jargons in the Darknet

计算机科学 行话 文字嵌入 相似性(几何) 构造(python库) 词(群论) 自然语言处理 人工智能 质量(理念) 嵌入 语言学 图像(数学) 认识论 哲学 程序设计语言
作者
Liang Ke,Xinyu Chen,Haizhou Wang
标识
DOI:10.1145/3488560.3498469
摘要

With the continuous development of the darknet technology, the scale of darknet and have increased rapidly in recent years, leading to rampant crime in these anonymous trading markets. Monitoring these markets can effectively combat the criminal forces that hide behind them. One of the difficulties in understanding the darknet is that criminals usually use jargons to disguise transactions and thus avoid surveillance. These jargons usually distort the original meaning of innocent-looking words in obscure ways, posing significant challenges for crime tracking. Current research on Chinese jargon detection mainly adopts the method of keyword filtering, however, such methods have little effect on the complex and ever-changing structure of darknet jargons. We propose a Chinese jargon detection framework based on unsupervised learning. The main idea is to compare similarity with high-dimensional word embedding features from different corpus to find jargons. Firstly, we collect data from six Chinese Tor websites to build a dark corpus dataset. Afterwards, we build a word-based pre-training model called DC-BERT, which can generate high-quality contextual word embeddings. Finally, we construct a cross-corpus jargon detection framework based on similarity analysis, which can effectively detect Chinese jargons in the darknet. The experimental results show that the proposed framework is both innovative and practical, reaching a detection accuracy of 91.5%.

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
苏道完成签到,获得积分10
1秒前
清萍红檀完成签到,获得积分10
1秒前
wkqqq发布了新的文献求助10
1秒前
聪明冬萱发布了新的文献求助10
2秒前
2秒前
蛋又白应助初景采纳,获得10
3秒前
失眠的契完成签到,获得积分10
3秒前
马耳完成签到,获得积分10
3秒前
幽一完成签到,获得积分10
3秒前
zy00完成签到,获得积分10
3秒前
4秒前
yeah完成签到 ,获得积分10
4秒前
何薪科完成签到 ,获得积分10
4秒前
4秒前
4秒前
Fariishta完成签到,获得积分10
5秒前
吃土的牛马完成签到,获得积分10
5秒前
番茄完成签到,获得积分10
5秒前
YM完成签到,获得积分10
5秒前
叶远望完成签到,获得积分10
5秒前
5秒前
斯文的尔冬完成签到,获得积分10
5秒前
6秒前
英勇的凌蝶完成签到,获得积分10
6秒前
6秒前
jyt完成签到,获得积分10
7秒前
DW应助GH采纳,获得10
7秒前
7秒前
XIAOBAI发布了新的文献求助10
8秒前
艾妮妮完成签到,获得积分10
8秒前
tianjing0307完成签到 ,获得积分10
8秒前
lcj完成签到,获得积分10
8秒前
机智的紫南完成签到,获得积分10
9秒前
9秒前
李健应助hyx采纳,获得10
9秒前
dd完成签到,获得积分10
10秒前
10秒前
年轻采波完成签到,获得积分10
10秒前
渺渺发布了新的文献求助10
10秒前
Danzel应助cui采纳,获得60
10秒前
高分求助中
(应助此贴封号)【重要!!请各用户(尤其是新用户)详细阅读】【科研通的精品贴汇总】 10000
Essentials of Carbohydrate Chemistry and Biochemistry, 4th Edition 800
Organizational Behavior 510
Management and the Arts 510
Matrix Methods in Data Mining and Pattern Recognition Second Edition 510
CLSI VET01S-2024 Performance Standards for Antimicrobial Disk and Dilution Susceptibility Tests for Bacteria Isolated From Animals (7th Ed) 500
DIPPR Project 801 - Full Version 380
热门求助领域 (近24小时)
化学 材料科学 医学 生物 纳米技术 计算机科学 化学工程 工程类 有机化学 物理 复合材料 生物化学 内科学 细胞生物学 基因 遗传学 免疫学 冶金 光电子学 癌症研究
热门帖子
关注 科研通微信公众号,转发送积分 7766283
求助须知:如何正确求助?哪些是违规求助? 9310196
关于积分的说明 20315381
捐赠科研通 7351072
什么是DOI,文献DOI怎么找? 3315052
关于科研通互助平台的介绍 2464580
邀请新用户注册赠送积分活动 2329619