发明名称 |
MapReduce系统中的作业分解控制方法及调度节点设备 |
摘要 |
本发明公开了一种MapReduce系统中的作业分解控制方法及调度节点设备,用以提升MapReduce系统的可靠性。MapReduce系统中的作业分解控制方法,包括:调度节点监控本节点的资源使用信息;在作业分解执行状态下,当资源使用信息满足设定的作业分解暂停条件时,暂停从作业缓存队列中提取作业进行分解,所述作业缓存队列中缓存客户端提交的未分解的作业;在作业分解暂停状态下,当资源使用信息满足设定的作业分解重启动条件时,重新启动从作业缓存队列中提取作业进行分解。 |
申请公布号 |
CN102096603A |
申请公布日期 |
2011.06.15 |
申请号 |
CN200910242672.2 |
申请日期 |
2009.12.14 |
申请人 |
中国移动通信集团公司 |
发明人 |
孙宏伟;郭磊涛 |
分类号 |
G06F9/50(2006.01)I |
主分类号 |
G06F9/50(2006.01)I |
代理机构 |
北京同达信恒知识产权代理有限公司 11291 |
代理人 |
郭润湘 |
主权项 |
一种映射化简MapReduce系统中的作业分解控制方法,其特征在于,包括:调度节点监控本节点的资源使用信息;在作业分解执行状态下,当资源使用信息满足设定的作业分解暂停条件时,暂停从作业缓存队列中提取作业进行分解,所述作业缓存队列中缓存客户端提交的未分解的作业;在作业分解暂停状态下,当资源使用信息满足设定的作业分解重启动条件时,重新启动从作业缓存队列中提取作业进行分解。 |
地址 |
100032 北京市西城区金融大街29号 |