一种关联规则数据挖掘算法的并行计算方法及装置

摘要

本发明实施例公开了一种关联规则数据挖掘算法的并行计算方法，采用并行计算和分布式数据存储的方式，能够解决现有技术所存在的瓶颈和缺点，实现海量数据的快速、简单关联规则挖掘。本发明实施例方法包括：定义最小支持度和最小置信度；扫描数据库产生一维候选集及其支持度和数据最大维度并将源数据按数据维度分成多个分布式存储的数据库；根据所述最小支持度筛选所述一维候选集，得到新候选集；根据所述新候选集产生所有维度大于1且不大于最大维度的可能候选集键值对；根据键值Key将可能候选集Val分发到并行计算集群；根据预设规则分别对各并行计算集群进行计算，得到计算结果；将所述计算结果汇总并产生关联规则集。

主权项

一种关联规则数据挖掘算法的并行计算方法，其特征在于，包括：定义最小支持度和最小置信度；扫描数据库产生一维候选集及其支持度和数据最大维度并将源数据按数据维度分成多个分布式存储的数据库；根据所述最小支持度筛选所述一维候选集，得到新候选集；根据所述新候选集产生所有维度大于1且不大于最大维度的可能候选集键值对；根据键值Key将可能候选集Val分发到并行计算集群；根据预设规则分别对各并行计算集群进行计算，得到计算结果；将所述计算结果汇总并产生关联规则集。