数据任务的分布式计算方法和分散存储模块

摘要

方法通过下述操作开始：分散存储（DS）处理模块选择用于执行任务的分布式存储和任务（DST）执行单元集合，并确定数据的分散存储差错编码参数。所述方法以下述操作继续：DS处理模块根据参数来对数据进行分散存储差错编码以产生多个编码数据块，并将所述多个编码数据块成组为多个编码数据块成组；所述方法以下述操作继续：DS处理模块将任务分区为部分任务的集合，将所述多个编码数据块成组中的至少一些输出至DST执行单元集合，以及将部分任务的集合输出至DST执行单元集合以对多个编码数据块成组中的至少一些执行部分任务的集合。

主权项

一种用于对数据的任务的分布式计算的方法，所述方法包括：基于任务和分布式存储和任务DST执行单元能力信息中的至少一个来选择用于执行任务的DST执行单元集合；基于关于DST执行单元集合的信息来确定数据的分散存储差错编码参数；根据分散存储差错编码参数来对数据进行分散存储差错编码，以产生多个编码数据块；根据分散存储差错编码将所述多个编码数据块成组为多个编码数据块成组；基于DST执行单元能力信息和关于DST执行单元集合的信息中的至少一个将任务分区为部分任务的集合；将所述多个编码数据块成组中的至少一些输出至DST执行单元集合；以及将部分任务的集合输出至DST执行单元集合以对所述多个编码数据块成组中的所述至少一些执行部分任务的集合。