一种自动分类的网页搜索排序算法

来源：计算机应用研究杂志2019年第1期北京时间：

作者：刘铭瑀,刘学亮,胡骏,

单位：合肥工业大学计算机与信息学院,合肥230009；

摘要：针对传统网页排序算法Okapi BM25通常会出现网页与查询关键词领域无关的领域漂移现象，以及改进算法需要人工建立领域向量的问题，提出了一种基于BM25和softmax回归分类模型的网页搜索排序算法。方法对网页文本进行数据预处理并利用词袋模型进行网页文本的向量表示，之后通过少量的网页数据训练Softmax回归分类模型，来预测测试网页数据的类别分数，并与BM25信息检索的分数结合在一起，得到最终的网页排序结果。实验结果显示该检索算法无须人工建立领域向量，即可达到很好的网页排序结果。

关键词：领域向量,BM25,softmax回归分类,网页排序,

基金资助：国家自然科学基金资助项目(61472116,61502139)；安徽省自然科学基金资助项目(1608085MF128)；；