一种不稳定网络中大数据量远程采集方法与系统

摘要

本发明公开一种不稳定网络中大数据量远程采集方法与系统，其中所述方法包括：工业现场数据采集；不稳定网络中数据远程传输；批量数据接收、处理与存储。其中工业现场数据采集能够按照不同的业务需求进行变量配置；数据远程传输采用先进先出的队列方式，通过调用远程服务批量导入结构化数据到远程服务器；远程服务按照先进先出的原则接收结构化数据到队列，经处理后批量导入到服务器数据库，完成不稳定网络中大数据量的采集。本发明公布的方法和系统在上述各环节中皆采用多线程机制，从而能够满足不同工业现场的应用需求，尤其是在网络不稳定的环境中，能够同时满足数据的完备性和远程监控的实时性，对工业级互联网现场应用具有重要的推广价值。

主权项

一种不稳定网络中大数据量远程采集系统，其特征在于，包括数据采集模块、通信网络模块和数据处理模块，所述数据采集模块用于采集工业现场设备所产生的状态数据，由工业现场设备、数据采集装置和本地监控系统三部分组成，所述本地监控系统用于数据采集端运行状态和设备状态的监测以及本地数据的管理；所述通信网络模块可将采集到的状态数据转化成在网络上传输的结构化数据或字符串数据传递给数据处理模块；所述数据处理模块对接收到的结构化数据或字符串数据进行解析处理，并保存在服务器数据库中；所述通信网络模块采用异构的广域网作为通信网络；所述结构化数据的结构由点位编号、数据的值、数据质量和时间戳组成，所述字符串数据仅由数据的值组成。