物联网数据高效分析方法

摘要

本发明提供了一种物联网数据高效分析方法，该方法包括：数据分析系统以Hadoop为平台，将物联网中的射频标签数据进行过滤、转换、合并处理，并在分布式系统中保存；应用副本策略将数据文件的副本在不同节点上保存，将Map/Reduce的数据处理策略存储在策略存储节点中；主程序创建与管理要执行的任务，将任务分配至空闲状态的工作程序，工作程序结合Map/Reduce进行操作处理，然后通过主程序汇总最终结果并向用户反馈。本发明提出了一种物联网数据高效分析方法，采用分布式处理方式实现物联网海量数据的分析和挖掘，有效提高了物联网中的数据处理效率。

主权项

一种物联网数据高效分析方法，其特征在于，包括：数据分析系统以Hadoop为平台，将物联网中的射频标签数据进行过滤、转换、合并处理，并在分布式系统中保存；应用副本策略将数据文件的副本在不同节点上保存，将Map/Reduce的数据处理策略存储在策略存储节点中；主程序创建与管理要执行的任务，将任务分配至空闲状态的工作程序，工作程序结合Map/Reduce进行操作处理，然后通过主程序汇总最终结果并向用户反馈。