一种面向数据处理的能耗优化数据集分配方法

摘要

本发明公开了一种面向数据处理的能耗优化数据集分配方法，包括：把待分配数据集按照IOPS属性值从大到小依次排序形成待分配数据集队列，数据中心服务器也按照IOPS能力从大到小依次排序构成待分配服务器队列；同时创建已分配服务器队列和各个数据中心服务器的已分配数据集队列，从上述待分配数据集队列头部取出第一个待分配数据集，同时判断已分配服务器队列是否为空，若已分配服务器队列为空，则从待分配服务器队列头部选取第一台服务器作为当前数据中心服务器。本方法使得IOPS需求大的热点数据集得以集中分配在数据中心服务器上，避免了处理大规模数据过程中虚拟机的放置和迁移问题，达到了全面优化数据中心能耗值、平衡服务器负载的目的。

主权项

一种面向数据处理的能耗优化数据集分配方法，其特征在于，包括以下步骤：（1）获取待分配数据集的属性值，以得到第一属性值集合A；（2）获取数据中心服务器的属性值，以得到第二属性值集合B；（3）把第一属性值集合A中待分配数据集按照其IOPS属性值从大到小依次排序形成待分配数据集队列，把第二属性集集合B中所有数据中心服务器也按照其IOPS属性值从大到小依次排序构成待分配服务器队列；（4）从待分配数据集队列M中选取出将进行分配的当前数据集，同时根据已分配服务器队列L和待分配服务器队列N中队列元素的不同情况选取出对应的当前数据中心服务器，将该当前数据集分配到当前数据中心服务器中，并重新计算当前数据中心服务器的平均CPU使用值、平均IOPS使用值、以及平均内存使用值；（5）将获取的当前数据中心服务器的平均IOPS使用值、平均CPU使用值、以及平均内存使用值，乘以该数据中心服务器已分配数据集列表中已分配数据集的总数，得到总IOPS、CPU、内存使用值，与数据中心服务器的峰值IOPS、峰值CPU和峰值内存进行比较，根据比较结果将数据集部署到符合条件的数据中心服务器上，当所有待分配数据集都分配完成或者所有数据中心服务器都分配完成，过程结束。