主权项 |
一种分布式计算数据合并方法,其特征在于,该方法包括以下步骤:根据分布式计算任务分割的情况设置配置文件,该配置文件包括:需要合并数据表名、栏位名、数据插入方式和合并方式;数据合并伺服器藉由读取该设置的配置文件将该配置文件导入,根据预定的数据合并介面标准分析该配置文件,得到用户配置的资讯并根据该用户配置的资讯,该标准规范了不同的分布式计算的应用;该数据合并伺服器根据该用户配置的资讯建立与该配置文件对应的数据库表;各个分布式节点完成分布式计算任务后根据该数据插入方式将计算结果资讯插入该数据库表;该数据合并伺服器根据该合并方式将数据库表中的数据合并,其中,该合并方式包括以下至少其中一者:对数据库表中的栏位分组;对数据库表中的栏位进行加合;以及对数据库表中的栏位求最大值。
|