一种基于准实时平台的数据集群管理系统

摘要

本发明公开了一种基于准实时平台的数据集群管理系统，包括存储载体层和集群数据访问中间件；所述存储载体层是由若干子节点组成的集群数据库，所述的每个子节点为一个物理数据库服务器；所述集群数据库访问中间件包括集群管理模块、通讯管理模块、执行引擎模块和连接管理模块。本方法将多个实时数据库和关系数据库组成集群数据库，对外提供统一的访问接口，实现测点位置对访问接口透明，对外提供统一透明的数据访问服务，满足准实时平台海量数据的集中存储与共享。

主权项

一种基于准实时平台的数据集群管理系统，其特征在于：包括存储载体层和集群数据访问中间件；所述存储载体层是由若干子节点组成的集群数据库，所述的每个子节点为一个物理数据库服务器，所述集群数据库访问中间件包括集群管理模块、通讯管理模块、执行引擎模块和连接管理模块；所述集群管理模块，包括节点数据库管理子模块、数据库服务运行状态管理子模块和全局日志管理子模块；所述节点数据库管理子模块，维护管理子节点的注册、注销、配置信息；所述数据库服务运行状态管理子模块，对子节点服务的启动、停止状态进行维护，并浏览查询子节点的状态；所述全局日志管理子模块，通过查找各个子节点的运行日志、分析日志并及时排除子节点的故障，保证子节点上数据库实例的稳定运行；所述通讯管理模块，通过标准的访问接口接受客户端应用程序发送的访问请求，经身份验证通过后即可成功建立连接，连接请求代理为每个连接创建一个服务线程，在连接生命期内提供数据访问服务；所述执行引擎模块，包括集群数据的查询操作处理子模块和任务调度处理子模块；其中，所述查询操作处理子模块将客户端对集群数据库的查询语句进行分析和处理，根据全局测点数据分布信息将全局数据的访问解析为对各子节点上的数据库实例读写操作；所述任务调度处理子模块：负责各子节点上的数据库实例操作指令信息发布，管理各子节点上数据库实例实时任务调度，协调多个子节点之间任务的执行，保证实时任务在时间截止期内完成；所述连接管理模块：实现各子节点上数据库实例的一个连接池以及一套连接使用、分配、治理策略。