应用软件运行日志的收集与服务处理框架

来源：计算机工程与应用杂志2018年第10期北京时间：

作者：张 骁1，2，应 时1，2，张 韬3

单位：1.武汉大学 软件工程国家重点实验室，武汉 430072；2.武汉大学 计算机学院，武汉 430072；3.中国移动通信集团 湖北有限公司，武汉 430023

摘要：随着现代计算机系统的规模和复杂性不断增大，其运行日志的数量也不断增多，但是由于日志数据的规模巨大、内容杂乱，用户查看日志数据具有一定的困难，因此对应用软件运行日志进行有效收集与处理具有重要意义。提出了一种应用软件运行日志的收集与服务处理框架，利用分布式收集策略对日志数据收集，定义了一种多层次数据存储结构对日志数据进行存储，并向用户提供日志数据查询服务。通过对某综合减灾系统的日志数据分析验证了提出的日志数据收集与服务处理框架的实用性，并与传统的日志收集分析软件ELK和Chukwa进行了对比。

关键词：日志数据,框架,收集处理,分布式收集,多层次数据存储,查询服务