车辆监控系统的数据质量分析系统及其方法

摘要

提供一种车辆监控系统的数据质量分析系统及其方法，其可保证车辆后续的数据处理和服务的质量。系统包括粗差识别模块、完整性分析模块、可信度分析模块，将数据的采集时间戳去重、排序；对速度、转速以及GPS进行有效区间判断而粗差识别；完整性分析，如时间戳的间隔大于常值，则分段，识别缺失段；可信度分析，对于里程、发动机运行时间、累计油耗三个采样的集合进行单调递增性分析；根据单调递增性分析得到的结果，对于数据的增值不符合标准范围的数据进行多源性分析，提取该采集时间段，从开始时间到结束时间，查询GPS、发动机运行时长、累计油耗的变化量，根据系统设定标准范围判断：数据丢失造成的数据异常或数据跳变引起的异常。

主权项

一种车辆监控系统的数据质量分析系统，包括依次连接的采集数据输入模块、数据的相对值预处理模块、粗差识别模块、完整性分析模块、可信度分析模块、结果输出模块，具体为：采集数据输入模块，该模块包括采集装置与输入装置，采集装置对里程、速度、发动机运行时长、累计油耗、转速、GPS数据进行采集，输入装置将数据输入系统内，送入数据的相对值预处理模块进行如理；数据的相对值预处理模块，将每项数据的采集时间戳去重、排序，将其处理为各子集合，对各子集合进行并集运算，得到总集合，认为总集合就是车辆运行的时间(Tall)；粗差识别模块，对速度、转速以及GPS三个采样数据集合，进行有效区间判断，其中超过车辆运行标准范围的，认为属于数据异样，将结果发送到结果输入模块；完整性分析模块，对Tall进行分段，采用各子集合中采集频率最小的子集数据采集间隔δ，若Tall中两个相邻的时间戳之间时间间隔大于3δ，则对Tall进行分段；按各子集数据采集时间间隔为δ，对各子集数据进行如上分段操作，将个子集分段结果与Tall分段结果进行对比分析，识别各子集数据缺失段；可信度分析模块，该模块包括单调递增性分析模块以及多源综合分析模块；单调递增性分析模块用于识别出数据发生跳变或乱序现象以及非正常增长现象，单调递增性模块对于里程、发动机运行时间、累计油耗三个采样的集合进行分析，对各项采集数据集合中的每个相隔的两数据的差值(d_data(i))进行判断，如果数据差值为正数，认为该项数据有所增长，如果差值为负数，该项数据发生跳变或乱序现象，如果差值为零，认为数据无变化；多源综合分析模块，根据单调递增性模块的得到的结果，对于数据的增值不符合标准范围的那组数据进行再次分析，提取该采集时间段，从开始时间到结束时间，查询GPS、发动机运行时长、发动机累计油耗三项在该段时间内的变化量，系统设定有各个数据跳变最小阈值的标准范围，根据该范围判断该采集时间段的数据属于数据丢失造成的数据变化率异常或者是数据跳变引起的变化量异常；传输该结果给结果输入模块。