一种分布式计算机集群下的数据采集方法及系统

摘要

本发明提供了一种分布式计算机集群下的数据采集方法及系统，所述方法包含：复数个消息收集模块分别检测复数个应用服务器的数据状态，当任一所述应用服务器的所述数据状态发生变化时，对应的所述消息收集模块采集所述应用服务器上的增量数据；通过消息转发模块将所述消息收集模块发送的复数个增量数据分别补充处理后合并为更新数据；存储模块将所述更新数据与存储的历史数据比对合并后根据数据类型存储。通过并发提升了数据传输的效率；通过内存队列为大集群的数据传输提供了顺序性、完整性和可靠性；以“只读+监控”的方式访问数据流，无论业务系统如何设计，只要有可读的数据流，即可实现增量的数据收集；极大的降低了本系统与各业务系统的耦合度。

主权项

一种分布式计算机集群下的数据采集方法，其特征在于，所述方法包含：复数个消息收集模块分别检测复数个应用服务器的数据状态，当任一所述应用服务器的所述数据状态发生变化时，对应的所述消息收集模块采集所述应用服务器上的增量数据；通过消息转发模块将所述消息收集模块发送的复数个增量数据分别补充处理后合并为更新数据；存储模块将所述更新数据与存储的历史数据比对合并后根据数据类型存储。