提高目标数据准确性的数据清洗方法及清洗系统

摘要

一种提高目标数据准确性的数据清洗方法，包括：(1)从数据源中找到与所述目标数据相关的若干原始字段项A1，A2...An；(2)建立逻辑处理模型：目标数据量＝f(M1(q1，G1(A1))，M2(q2，G2(A2))，...Mn(qn，Gn(An)))其中，A1，A2...An分别为原始字段项，G1(A1)、G2(A2)...Gn(An)分别为反映每一原始字段项中数据属性的属性函数，q1，q2...qn为每一原始字段项的权重值；M1(q1，G1(A1)，M2(q2，G2(A2))..Mn(qn，Gn(An))为影响目标数据值的每一原始字段分值的影响函数，f()为根据每一影响函数确定目标数据值的确定函数；(3)在每一次数据清洗时，找到所有的原始字段项，根据逻辑处理模型确定目标数据的数值。本发明能够提高从数据源中清洗出来的目标数据的准确性。

主权项

1、一种提高目标数据准确性的数据清洗方法，用以提高从数据源中清洗出来的目标数据的准确性，其特征在于，包括以下步骤：(1)从数据源中找到与所述目标数据相关的若干原始字段项A1，A2...An；(2)建立逻辑处理模型：(21)根据每一原始字段项中影响目标数据的因素大小确定每一原始字段项的权重值q1，q2...qn；(22)确定该目标数据值的逻辑处理模型：目标数据量＝f(M1(q1，G1(A1))，M2(q2，G2(A2))，...Mn(qn，Gn(An)))其中，A1，A2...An分别为原始字段项，G1(A1)、G2(A2)...Gn(An)分别为反映每一原始字段项中数据属性的属性函数，q1，q2...qn为每一原始字段项的权重值；M1(q1，G1(A1)，M2(q2，G2(A2))..Mn(qn，Gn(An))为影响目标数据值的每一原始字段分值的影响函数，f()为根据每一影响函数确定目标数据值的确定函数；(3)在每一次数据清洗时，找到所有的原始字段项，根据逻辑处理模型确定目标数据的数值。