数据处理方法及装置

摘要

本发明实施例公开了一种数据处理方法及装置，用有向图表示数据处理模型，在接收到客户端发送的携带有节点列表的指令时，对节点列表中的任意一节点，若该节点的父节点对应的数据集未被处理，则优先对该节点的父节点对应的数据集进行处理，若该节点的父节点对应的数据集已被处理，则直接从执行上下文读取父节点的输出数据集作为该节点的输入数据集，基于该节点对应的数据集对该节点的输入数据集进行处理，生成该节点的输出数据集，将该节点的输出数据集记入执行上下文。可见，本发明实施例提供的数据处理方法，已被成功处理的节点的数据集不再重复处理，实现只对部分节点的数据进行处理，从而提高数据处理效率。

主权项

一种数据处理方法，其特征在于，包括：基于客户端发送的数据处理模型描述文件获取与所述数据处理模型描述文件对应的数据处理模型对象实例；所述数据处理模型描述文件由数据处理模型转换得到，所述数据处理模型为有向图，所述有向图中的节点包括，包含至少一个父节点的操作节点和不包含任何父节点的数据源节点，所述有向图中的每一个节点对应一个数据集；当接收到客户端发送的携带有由所述数据处理模型对象实例中的若干节点构成的节点列表的执行指令时，对于所述节点列表中的第一节点，若所述第一节点的输入数据来自于所述第一节点的父节点，且所述第一节点的父节点所对应的数据集未被成功处理，则将所述第一节点的父节点加入所述节点列表并优先处理；若所述第一节点的输入数据来自于所述第一节点的父节点，且所述第一节点的父节点所对应的数据集已被成功处理，则从执行上下文获取所述第一节点的父节点的输出数据集作为所述第一节点的输入数据集，基于所述第一节点对应的数据集对所述第一节点的输入数据集进行处理，生成所述第一节点的输出数据集，将所述第一节点的输出数据集记入执行上下文；所述第一节点为所述节点列表中的任意一节点。