发明名称 | 一种分布式系统数据提取方法 | ||
摘要 | 本发明公开了一种分布式系统数据提取方法,其实现过程为:首先将分布式系统数据通过RocketMQ传输到目标库中的临时表中,当各个分布式系统的数据都传输完毕之后,通过数据开放功能将目标库中的临时表数据转储到正式表中;每天通过数据校验功能,定时校验目标库数据和分布式系统数据是否一致,不一致的情况通过Kettle工具进行数据补救,确保分布式系统数据和目标库数据一致。该一种分布式系统数据提取方法与现有技术相比,采用先将数据插入到目标库的临时表中,然后采用数据开放功能校验分布式系统中数据和目标库中数据是否一致,数据一致的情况下才转储到正式表,确保了抽取数据一致性,实用性强,适用范围广泛,易于推广。 | ||
申请公布号 | CN106407366A | 申请公布日期 | 2017.02.15 |
申请号 | CN201610812125.3 | 申请日期 | 2016.09.09 |
申请人 | 浪潮软件股份有限公司 | 发明人 | 刘天智;崔玉华 |
分类号 | G06F17/30(2006.01)I | 主分类号 | G06F17/30(2006.01)I |
代理机构 | 济南信达专利事务所有限公司 37100 | 代理人 | 孟峣 |
主权项 | 一种分布式系统数据提取方法,其特征在于,其实现过程为:首先将分布式系统数据通过RocketMQ传输到目标库中的临时表中,当各个分布式系统的数据都传输完毕之后,通过数据开放功能将目标库中的临时表数据转储到正式表中;每天通过数据校验功能,定时校验目标库数据和分布式系统数据是否一致,不一致的情况通过Kettle工具进行数据补救,确保分布式系统数据和目标库数据一致。 | ||
地址 | 250101 山东省济南市高新区浪潮路1036号 |