基于MapReduce的新会话识别方法

来源：计算机工程与科学杂志2016年第3期北京时间：

作者：黄伟建,宋园园

单位：（河北工程大学信息与电气工程学院，河北 邯郸 056038）

摘要：Web日志预处理因其输出结果的重要性而受到越来越多的重视，同时Hadoop对海量数据的分布式处理也得到广泛研究和应用，因此使用MapReduce进行Web日志预处理成为一种必然的发展趋势。为了提高会话识别结果的准确率，在分析会话识别算法研究现状的基础上，提出一种基于网络拓扑结构和动态阈值相结合的新会话识别方法并讨论其优势所在，接着用MapReduce模型实现新方法的分布式处理，最后通过对比实验分析验证MapReduce模型实现新算法的高效性和高精确度。

关键词：Web日志预处理,会话识别,MapReduce,分布式处理,

基金资助：河北省自然科学基金（F2015402077）;河北省高等学校科学技术研究重点项目（ZD2014054）