基于异构集群的数据分布方法

摘要

本发明提供一种基于异构集群的数据分布方法，应用于多个相互通信的设备节点，该方法包括：读取各设备节点的数据块读取信息并确定所需的任务数据；其中，数据块读取信息包括执行本地任务时本地计算的数据块、被其他设备节点读取的数据块和从其他设备节点读入的数据块；根据读取的数据块读取信息预测各设备节点的计算能力；根据预测的结果将确定的任务数据分布为各设备节点的本地任务。本发明通过利用底层任务数据的分布指导上层任务的调度，合理分布数据，使设备节点的计算能力与分布数据匹配，并且本发明还将确定的任务数据分布为各设备节点的本地任务，解决了由于远程任务以及数据移动引起的网络开销、恶化网络资源争抢的问题。

主权项

一种基于异构集群的数据分布方法，应用于多个相互通信的设备节点，其特征在于，包括：读取各设备节点的数据块读取信息并确定所需的任务数据；其中，所述数据块读取信息包括执行本地任务时本地计算的数据块、被其他设备节点读取的数据块和从其他设备节点读入的数据块；根据读取的数据块读取信息预测各设备节点的计算能力信息；根据预测的结果将确定的任务数据分布为各设备节点的本地任务。