发明名称 一种轨道交通监测数据的存储和处理方法及系统
摘要 本发明涉及一种轨道交通监测数据的存储和处理方法及系统,首先在车站、电务段及铁路管理部门设立集中监测系统;车站的集中监测系统采集各类监测数据,电务段的集中监测系统收集车站集中监测系统采集的各类监测数据;在一综合运维平台上建立HDFS分布式文件系统、Hbase和Oracle数据库以及MapReduce并行处理架构,形成云计算平台,进而对所述监测数据进行存储和分析挖掘,产生知识规则数据和各类统计信息;铁路管理部门的集中监测系统产生调度指挥命令并反馈给电务段的集中监测系统。本发明采用云存储技术以及并行处理架构,提高了轨道交通资源和数据的存储和分析处理效率,保证了数据的安全性和高可用性。
申请公布号 CN103338261B 申请公布日期 2016.06.29
申请号 CN201310279514.0 申请日期 2013.07.04
申请人 北京泰乐德信息技术有限公司 发明人 鲍侠
分类号 H04L29/08(2006.01)I;G06F17/30(2006.01)I 主分类号 H04L29/08(2006.01)I
代理机构 北京君尚知识产权代理事务所(普通合伙) 11200 代理人 余长江
主权项 一种轨道交通监测数据的集中存储和处理方法,其步骤包括:1)在车站、电务段及铁路管理部门分别设立集中监测系统,在车站与电务段的集中监测系统间以及电务段与铁路管理部门的集中监测系统间建立通信连接;2)车站的集中监测系统直接连接各种采集器,负责采集各类监测数据,包括历史监测数据和实时监测数据,电务段的集中监测系统收集本电务段包含的车站集中监测系统采集的各类监测数据,并传输给一综合运维平台;车站和电务段的集中监测系统不存储采集到的监测数据,只由综合运维平台存储采集到的监测数据;3)在所述综合运维平台上建立HDFS分布式文件系统、Hbase数据库、Oracle数据库以及MapReduce并行处理架构,形成云计算平台;所述云计算平台将获取的历史监测数据转换为文本格式存储在HDFS上,并利用MapReduce并行处理架构对HDFS上存储的历史监测数据建立全文索引,通过全文索引技术对监测数据进行索引监理,并通过发布对应的查询接口实现碎片查询,支持用户按照不同的方式查询系统信息,包括按照时间查询和按照线路查询;所述云计算平台接收到实时监测数据后,解析数据的格式,确定监测数据的设备及监测值,然后将数据插入到Oracle对应的数据库中,并将监测数据转换为文本存储在HDFS文件系统中;所述云计算平台通过MapReduce并行处理架构对历史监测数据进行数据挖掘,产生知识规则数据并存储在Hbase数据库中,并将接收到的实时监测数据与所述知识规则数据进行匹配并进行统计分析,生成各类统计信息,并将所述各类统计信息反馈至电务段的集中监测系统;4)电务段的集中监测系统将收到的所述各类统计信息传输给铁路管理部门的集中监测系统,铁路管理部门的集中监测系统根据所述各类统计信息产生调度指挥命令,并反馈给电务段的集中监测系统。
地址 100080 北京市海淀区知春路51号慎昌大厦5225室