发明名称 |
一种面向实时大数据平台Storm的属性抽取系统 |
摘要 |
本发明提出了一种面向实时大数据平台Storm的属性抽取系统,包括:搭建Storm集群环境;开启Storm集群环境;开发拓扑结构,上传拓扑任务到Storm集群;开启代码注入器,动态注入监控代码;启动监控设备上的监控器,感知Storm集群自身对象以及拓扑结构中的对象;收集Storm环境属性,存入存储设备。本发明开发了感知Storm云平台环境属性的一套具有高使用性的API,使其能够获取集群环境的状态,同时保证集群的可获得、可靠性和性能;建立了Storm运行时状态下的E-R模型,使其能够为资源调度、包括从线程级别到虚拟机级别的瓶颈检测、集群实时环境可视化等需求提供可靠的数据模型依据。 |
申请公布号 |
CN105681308A |
申请公布日期 |
2016.06.15 |
申请号 |
CN201610040260.0 |
申请日期 |
2016.01.18 |
申请人 |
中国石油大学(华东) |
发明人 |
张卫山;段鹏程;宫文娟;卢清华;李忠伟 |
分类号 |
H04L29/06(2006.01)I;H04L29/08(2006.01)I |
主分类号 |
H04L29/06(2006.01)I |
代理机构 |
|
代理人 |
|
主权项 |
一种面向实时大数据平台Storm的属性抽取系统,其特征在于,包括:搭建Storm集群环境;开启Storm集群环境;开发拓扑结构,上传拓扑任务到Storm集群;开启代码注入器,动态注入监控代码;启动监控设备上的监控器,感知Storm集群自身对象以及拓扑结构中的对象;收集Storm环境属性,存入存储设备。 |
地址 |
266000 山东省青岛市经济技术开发区长江西路66号 |