发明名称 一种分布式系统的控制方法,及管理节点
摘要 本发明实施例公开一种分布式系统的控制方法,及管理节点,其中方法的实现包括:管理节点确定待处理的数据块,并获取管理节点下的各分布式节点的第一数据处理能力;管理节点按照各分布式节点的第一数据处理能力的大小,将待处理的数据块存入各分布式节点;在各分布式节点进行数据处理过程中,管理节点通过数据处理的完成状态确定各分布式节点的第二数据处理能力,并依据各分布式节点的第二数据处理能力将未处理的数据块进行重新存放。以上方案可以减少数据块的迁移,这样不仅可以充分利用分布式系统的计算能力,还可以通过提高数据处理的本地化率,来提升分布式系统的数据处理性能。
申请公布号 CN103716381B 申请公布日期 2017.04.12
申请号 CN201310681454.5 申请日期 2013.12.12
申请人 华为技术有限公司 发明人 朱韧;周伟
分类号 H04L29/08(2006.01)I;H04L12/24(2006.01)I 主分类号 H04L29/08(2006.01)I
代理机构 深圳市深佳知识产权代理事务所(普通合伙) 44285 代理人 王仲凯
主权项 一种分布式系统的控制方法,其特征在于,包括:管理节点确定待处理的数据块,并获取管理节点下的各分布式节点的第一数据处理能力;管理节点按照各分布式节点的第一数据处理能力的大小,将待处理的数据块存入各分布式节点;在各分布式节点进行数据处理过程中,管理节点通过数据处理的完成状态确定各分布式节点的第二数据处理能力,并依据各分布式节点的第二数据处理能力将未处理的数据块进行重新存放;其中,还包括:管理节点获取各分布式节点的网络速率;若按照第一数据处理能力大小或者第二数据处理能力大小,会将数据块存入第一分布式节点,并且第一分布式节点的网络速率小于网络速度预定阈值,则在分布式系统中重新选择节点进行存放。
地址 518129 广东省深圳市龙岗区坂田华为总部办公楼