一种移动互联网海量数据分析审计技术架构

摘要

本发明公开一种移动互联网海量数据分析审计技术架构，包括：数据分流模块，基于设置的分流策略对移动互联网中的业务数据中的核心流量进行分流降压；数据采集模块，结合零拷贝技术，采用PF_RING套接字实现，捕获业务流量中的数据包；数据预处理模块，通过对数据包打Mark标签实现对数据包的封装；数据解析模块，采用DPI/DFI相结合的技术，对数据包的流特征和有效载荷进行分析，实现流量分类、业务识别和有效载荷信息提取；数据审计模块，审计业务流量中的异常行为，生成检测数据和告警信息；数据存储模块，采用库表散列的方式快速存储有效载荷信息、监测数据和告警信息。本发明可实现对移动互联网海量数据的分流、采集、处理、认证、分析、监测和审计。

主权项

一种移动互联网海量数据分析审计技术架构，其特征在于，包括：数据分流模块，设置基于IP段、协议和端口的放行控制的分流策略，基于分流策略对移动终端在移动互联网中产生的业务数据中的核心流量进行分流降压，所述核心流量包括业务流量和认证流量；数据采集模块，结合零拷贝技术，采用PF_RING套接字实现，捕获业务流量中的数据包；数据预处理模块，通过对数据包打Mark标签实现对数据包的封装；数据解析模块，采用DPI/DFI相结合的技术，对数据包的流特征和有效载荷进行分析，实现流量分类、业务识别和有效载荷信息提取；数据审计模块，审计业务流量中的异常行为，生成检测数据和告警信息；数据存储模块，采用库表散列的方式快速存储有效载荷信息、监测数据和告警信息。