RFID设备网络环境下采集数据的清洗系统及方法

摘要

本发明公开了RFID设备网络环境下采集数据的清洗系统及方法，其特征在于服务器管理员通过服务器端用户输入管理单元，输入全局数据清洗单元运行的定制参数，客户端数据缓冲单元获取到识读器发送过来的数据，将之存储在缓冲区；通过局部数据清洗单元进行数据清洗；后通过客户端与服务器端通信单元发送到服务器端的全局数据缓冲单元，再由全局数据清洗单元进行数据清洗对客户端发送来的数据流统一清洗，包括单路过滤、多路校正、多路判决、多路归并的清洗操作，清洗之后，依据上层应用的数据格式，转换为上层应用需要的数据，并发送过去。该清洗系统及方法具有支持分布式环境，自适应的清洗策略调整，以及自定义的用户清洗操作定义等优点。

主权项

一种RFID设备网络环境下采集数据的清洗系统，其特征在于包括服务器端和客户端；所述服务器端包括：服务器端用户输入管理单元，用于提供系统初始化时的参数数据，即服务器端的：IP、DNS、端口、读取时间片和完全读取的置信概率；服务器端自定义规则处理单元，为用户提供的单路过滤、多路校正、多路判决、多路归并的清洗规则定义模板，为其定制所需的清洗规则；提供数据清洗规则的语法解析，即逐个字符扫描用户自定义清洗规则的文本，解析其中保留字、语法单位及其关联，为每个语法单位及其关联创建相应的对象及对象链接，最终形成该文本对应的AST树；全局数据缓冲单元，用于缓冲多个客户端发送至服务器端的数据；客户端通信管理单元，用于管理客户端与服务器端的通信；全局数据清洗单元，用于对所有提交到服务器端的数据按照用户自定义的清洗规则进行清洗，具体包括：（1）单路过滤：以用户定义的时间窗口对单一数据流进行过滤，过滤掉重复的数据；（2）多路校正：根据用户定义的时间窗口和识读器组，对多个数据流进行校正——删除与组无关的数据，比较同一时间点的多路数据为漏读识读器填补漏掉的数据；（3）多路判决：根据用户定义的时间窗口和识读器组，比较同一时间点的多路数据，根据用户的要求——把同一数据判决给某一识读器；（4）多路归并：根据用户定义的时间窗口和识读器组，在多路校正的基础上对多个数据流进行归并，把校正后的数据合并为该识读器组的数据；上层应用接口单元，用于将清洗之后的标准格式的数据提交给上层应用；客户端包括：客户端系统配置单元，用于用户对客户端的IP和端口进行配置；客户端数据缓冲单元，用于缓冲RFID识读器发送至客户端的数据；局部数据清洗单元，通过动态调整识读器的时间窗口对客户端数据缓冲单元缓存的数据进行清洗，即识读器读取的时间窗口要跟得上变化，标签移动得快了需要较短的时间窗口，标签移动的很慢就使用较大时间窗口；客户端与服务器端通信单元，用于将局部数据清洗单元清洗后的RFID数据发送到服务器端的全局数据缓冲单元中。