一种面向快速Web漏洞扫描的网页爬取方法
来源：计算机应用与软件杂志2026年第1期北京时间：
作者：王金翔，朱亚运，刘万大山，姜琳，刘林彬，李俊娥, , , , ,
摘要：随着Web应用规模的不断扩大，对网站进行漏洞扫描的时间成本也不断增加。为此，提出一种面向快速Web漏洞扫描的网页爬取方法。该方法在传统的面向Web漏洞扫描的爬虫的基础上，利用增量闭频繁项集挖掘算法对网站页面进行阶段性聚类，并基于页面聚簇和爬虫日志构建页面分类模型，以过滤由同一个服务处理程序生成的冗余页面。实验表明，该方法能有效减少漏洞扫描系统在网站目录遍历和页面聚类上消耗的时间，从而提升Web漏洞扫描的效率。
关键词：爬虫, Web漏洞扫描, 页面聚类, 频繁模式挖掘
