基于冗余度的KNN训练样本裁剪新算法

来源：计算机工程与应用杂志2019年第22期北京时间：

作者：王子旗，何锦雯，蒋良孝

单位：中国地质大学（武汉） 计算机学院，武汉 430074

摘要：作为数据挖掘领域十大算法之一，K-近邻算法（K-Nearest-Neighbor，KNN）因具有非参数、无需训练时间、简单有效等特点而得到广泛应用。然而，KNN算法在面对高维的大训练样本集时，分类时间复杂度高的问题成为其应用的瓶颈。另外，因训练样本的类分布不均匀而导致的类不平衡问题也会影响其分类性能。针对这两个问题，提出了一种基于冗余度的KNN分类器训练样本裁剪新算法（简记为RBKNN）。RBKNN通过引入训练样本集预处理过程，对每个训练样本进行冗余度计算，并随机裁剪掉部分高冗余度的训练样本，从而达到减小训练样本规模、均衡样本分布的目的。实验结果表明，RBKNN可在保持或改善分类精度的前提下显著提升KNN的分类效率。

关键词：KNN分类器,样本裁剪,快速分类,类不平衡