一种日志处理方法和装置

摘要

本发明公开了一种日志处理方法和装置，该方法包括：每隔预设时间段从输入源接收一段数据流，每段数据流中包括在前一预设时间段内产生的多条日志；在接收到每段数据流后，对该段数据流中的每条日志进行初次解析，得到每条日志对应的指定结构数据；对该段数据流中多条日志对应的多个指定结构数据进行初次聚合，对初次聚合后的指定结构数据进行缓存；当到达预设统计周期的计算时机时，对缓存的指定结构数据进行计算处理，得到该统计周期对应的日志处理结果。该过程中间无需借助存储介质，不会产生由于启用进程读写存储介质而带来的延迟，对日志的初次解析、初次聚合及计算处理均一次性完成，效率高、运行稳定、中间数据不易丢失、尽可能保证日志处理的实时性。

主权项

一种日志处理方法，其中，该方法包括：每隔预设时间段从输入源接收一段数据流，每段数据流中包括在前一预设时间段内产生的多条日志；在接收到每段数据流后，对该段数据流中的每条日志进行初次解析，得到每条日志对应的指定结构数据；对该段数据流中多条日志对应的多个指定结构数据进行初次聚合，对初次聚合后的指定结构数据进行缓存；当到达预设统计周期的计算时机时，对缓存的指定结构数据进行计算处理，得到该统计周期对应的日志处理结果。