一种基于Spark大数据平台的日志审计倒查系统

摘要

本发明公开了一种基于Spark大数据平台的日志审计倒查系统，属于大数据与信息安全领域。该系统包括日志采集模块、日志审计分析模块、日志审计倒查模块、日志离线挖掘模块及视图模块，通过日志采集模块采集组织系统中的日志信息并实时推送到日志审计分析模块，由日志审计分析模块实时分析产生告警信息并发送到视图模块的前端页面。与现有技术相比，本发所述倒查系统可以为使用人员提供详尽的告警信息分析，具有良好的实用性及推广应用价值。

主权项

一种基于Spark大数据平台的日志审计倒查系统，其特征在于包括日志采集模块、日志审计分析模块、日志审计倒查模块、日志离线挖掘模块及视图模块：所述日志采集模块用于采集各种设备的日志并实时传递给分析模块；所述日志审计分析模块用于对采集到的日志做范式化统一规格，并根据规则库实时分析得到告警信息；所述日志审计倒查模块用于通过日志审计分析的结果倒查溯源，找到产生告警的源信息以及过程；所述日志离线挖掘模块用于对存储在HDFS的历史日志信息进行离线分析，并与规则库结合产生新的规则库中没有包含的规则条目；所述视图模块通过Mysql数据库中信息的查询和展现，提供告警信息和日志信息的查询和分析。