发明名称 |
一种数据库集群数据高速导入方法 |
摘要 |
本发明涉及一种数据库集群数据高速导入方法,其技术特点是:包括以下步骤:步骤1:数据导入驱动组件与数据库集群的交互模块建立连接并获取各个数据库节点连接信息;步骤2:数据导入驱动组件通过步骤1建立的数据库集群连接获取目标表的模式信息及分片存储信息并与相关数据库节点建立连接;步骤3:数据导入驱动组件向相关数据库节点进行数据导入,交互控制模块接收数据导入结果,并更新目标表的相关统计信息。本发明的数据导入驱动组件,解放了控制节点,实现在尽可能少受数据库集群干预的情况下完成数据的导入;同时,采用独立数据导入的方式,可以方便的通过增加客户端来实现并行导入,提升导入性能,从而满足企业对数据高速导入的要求。 |
申请公布号 |
CN102750368A |
申请公布日期 |
2012.10.24 |
申请号 |
CN201210200158.4 |
申请日期 |
2012.06.18 |
申请人 |
天津神舟通用数据技术有限公司 |
发明人 |
李晓鹏;冯柯;蒋志勇;李阳;刘荣;蒋旭;王洋洋;赵雪静;王效忠;关刚;饶路 |
分类号 |
G06F17/30(2006.01)I |
主分类号 |
G06F17/30(2006.01)I |
代理机构 |
天津盛理知识产权代理有限公司 12209 |
代理人 |
王利文 |
主权项 |
一种数据库集群数据高速导入方法,其特征在于:采用将数据导入模块从数据库集群中的控制节点中分离出来构成独立的数据导入驱动组件,在数据库集群中的控制节点中增加交互控制模块,并且通过以下步骤实现:步骤1:数据导入驱动组件与数据库集群的交互模块建立连接并获取各个数据库节点连接信息;步骤2:数据导入驱动组件通过步骤1建立的数据库集群连接获取目标表的模式信息及分片存储信息并与相关数据库节点建立连接;步骤3:数据导入驱动组件向相关数据库节点进行数据导入,交互控制模块接收数据导入结果,并更新目标表的相关统计信息。 |
地址 |
300384 天津市南开区华苑产业区华天道6号海泰大厦302室 |