MapReduce环境下的异常检测方法

摘要

本发明公开了一种MapReduce环境下的异常检测方法，包括以下步骤：S1：采集MapReduce中各从节点的性能指标值，并传递给主节点；S2：根据性能指标的类别对采集到的各从节点的性能指标值进行分类；S3：通过基于密度的聚类方法对分类后得到的各从节点的每一类性能指标值进行聚类；S4：对聚类后的结果进行分析，记录得到的异常结果并输出。本发明的方法算法简单、复杂度低，并且无需等到任务执行完毕，它可以在任务执行过程中即时地对报告上来的数据进行分析处理并即时输出异常结果，可以进行在线检测，实时性高。

主权项

一种MapReduce环境下的异常检测方法，其特征在于，包括以下步骤：S1：采集MapReduce中各从节点的性能指标值，并传递给主节点；S2：根据性能指标的类别对采集到的各从节点的性能指标值进行分类；S3：通过基于密度的聚类方法对分类后得到的各从节点的每一类性能指标值进行聚类；S4：对聚类后的结果进行分析，记录得到的异常结果并输出。