一种在大数据量存储中快速检索的方法

摘要

本发明涉及数据库审计技术领域，旨在提供一种在大数据量存储中快速检索的方法。该方法包括：采用关系型数据库存储审计记录，每条记录拥有唯一ID，并以惯常使用的检索特性为字段；议解析模块获取审计记录并入库；使用独立的全文索引引擎监控审计记录入库情况，对新入库的审计记录建立全文索引，并逐级建立和维护当前索引、单位小时索引、单位天索引；以检索特性为关键字使用全文索引进行检索，获取符合特性的审计记录的主ID集，再通过主ID集获取符合检索特性的所有审计记录的完整信息。本发明在建立全文索引过程中无需为检索特性增加检索属性，全文索引文件的开销比审计记录本身的存储更小。极大提升数据库审计系统的存储能力和检索性能。

主权项

一种在大数据量存储中快速检索的方法，其特征在于，包括如下步骤：A、采用关系型数据库存储审计记录，每条记录拥有唯一ID，并以惯常使用的检索特性为字段；B、协议解析模块获取审计记录后，对该审计记录进行入库，而不对该审计记录对应的SQL语句进行语义分析所产生的细粒度信息进行入库；C、使用独立的全文索引引擎监控审计记录入库情况，对新入库的审计记录建立全文索引，并逐级建立和维护当前索引、单位小时索引、单位天索引；D、检索时，以检索特性为关键字使用全文索引进行检索，获取符合检索特性的审计记录的ID集，再通过ID集获取符合检索特性的所有审计记录的完整信息；步骤A中所述的检索特性是在对数据进行检索时惯常使用的数据特征值，是下述内容中的至少一种：登录用户名、客户端IP、服务端IP、访问时间、SQL语句、被访问的数据库名、被访问的表、被访问的字段或SQL操作类型。