Using Proximity Graph Cut for Fast and Robust Instance‐Based Classification in Large Datasets

计算机科学 可扩展性 分类器(UML) 图形 数据挖掘 加速 掉期(金融) 模式识别(心理学) 算法 人工智能 理论计算机科学 财务 数据库 操作系统 经济
作者
Stanislav Protasov,Adil Khan
出处
期刊:Complexity [Hindawi Publishing Corporation]
卷期号:2021 (1) 被引量:2
标识
DOI:10.1155/2021/2011738
摘要

K‐nearest neighbours (kNN) is a very popular instance‐based classifier due to its simplicity and good empirical performance. However, large‐scale datasets are a big problem for building fast and compact neighbourhood‐based classifiers. This work presents the design and implementation of a classification algorithm with index data structures, which would allow us to build fast and scalable solutions for large multidimensional datasets. We propose a novel approach that uses navigable small‐world (NSW) proximity graph representation of large‐scale datasets. Our approach shows 2–4 times classification speedup for both average and 99th percentile time with asymptotically close classification accuracy compared to the 1‐NN method. We observe two orders of magnitude better classification time in cases when method uses swap memory. We show that NSW graph used in our method outperforms other proximity graphs in classification accuracy. Our results suggest that the algorithm can be used in large‐scale applications for fast and robust classification, especially when the search index is already constructed for the data.

科研通智能强力驱动
Strongly Powered by AbleSci AI
科研通是完全免费的文献互助平台,具备全网最快的应助速度,最高的求助完成率。 对每一个文献求助,科研通都将尽心尽力,给求助人一个满意的交代。
实时播报
科目三应助佳佳采纳,获得10
1秒前
向日葵完成签到,获得积分10
1秒前
2秒前
冬雷震震发布了新的文献求助10
3秒前
小薇丸子完成签到,获得积分10
3秒前
misa完成签到 ,获得积分10
3秒前
3秒前
3秒前
zho应助雪糕采纳,获得10
3秒前
molihuakai应助雪糕采纳,获得10
4秒前
pluto应助雪糕采纳,获得10
4秒前
隐形曼青应助雪糕采纳,获得10
4秒前
万物可爱完成签到,获得积分10
4秒前
孙嘉畯完成签到 ,获得积分10
4秒前
子非鱼完成签到,获得积分10
5秒前
星期天发布了新的文献求助10
5秒前
5秒前
发顶刊发布了新的文献求助10
6秒前
小树苗发布了新的文献求助20
6秒前
大q发布了新的文献求助10
7秒前
万物可爱发布了新的文献求助10
7秒前
8秒前
Nexus应助潇洒的惋清采纳,获得30
9秒前
cdercder应助潇洒的惋清采纳,获得10
9秒前
cdercder应助潇洒的惋清采纳,获得10
9秒前
深情安青应助潇洒的惋清采纳,获得10
9秒前
9秒前
无花果应助潇洒的惋清采纳,获得10
9秒前
慕青应助潇洒的惋清采纳,获得10
9秒前
Orange应助潇洒的惋清采纳,获得10
9秒前
9秒前
9秒前
9秒前
10秒前
李健应助MRZT采纳,获得10
10秒前
香蕉觅云应助星期天采纳,获得10
12秒前
orixero应助不扯先生采纳,获得10
12秒前
12秒前
大q完成签到,获得积分10
13秒前
orixero应助佳佳采纳,获得10
13秒前
高分求助中
Principles of Economics, 11th Edition 10000
University Physics with Modern Physics, 16th edition 10000
(应助此贴封号)【重要!!请各用户(尤其是新用户)详细阅读】【科研通的精品贴汇总】 10000
Molecular Mechanisms of Photosynthesis, 4th Edition 1000
Organic Reactions, Volume 116 1000
Current concepts in cutaneous toxicity : proceedings of the Fourth Conference on Cutaneous Toxicity, Washington, D.C., May 9-11, 1979 1000
The recovery-stress questionnaires : user manual 800
热门求助领域 (近24小时)
化学 材料科学 医学 生物 纳米技术 工程类 有机化学 化学工程 生物化学 计算机科学 内科学 物理 复合材料 催化作用 细胞生物学 无机化学 光电子学 物理化学 电极 基因
热门帖子
关注 科研通微信公众号,转发送积分 7259243
求助须知:如何正确求助?哪些是违规求助? 8881303
关于积分的说明 18765467
捐赠科研通 6939565
什么是DOI,文献DOI怎么找? 3201573
关于科研通互助平台的介绍 2375417
邀请新用户注册赠送积分活动 2177348