发明名称 |
一种数据采集方法以及ETL组件 |
摘要 |
本发明实施例公开了一种数据采集方法以及ETL组件,所述方法包括:数据采集周期到达时,确定本系统的当前系统时间;根据所述当前系统时间,以及预设的延迟时长计算出时间戳上限;根据计算出的时间戳上限,以及预设的第一采集时长计算时间戳下限;采集各业务系统中所述时间戳上限与时间戳下限所标示的时间范围内的数据。应用本发明,可以避免漏掉采集数据,提高数据采集的完整性。 |
申请公布号 |
CN105893529A |
申请公布日期 |
2016.08.24 |
申请号 |
CN201610195446.3 |
申请日期 |
2016.03.30 |
申请人 |
乐视控股(北京)有限公司;乐视云计算有限公司 |
发明人 |
杨佳浩;刘永华;鲍大磊 |
分类号 |
G06F17/30(2006.01)I |
主分类号 |
G06F17/30(2006.01)I |
代理机构 |
北京风雅颂专利代理有限公司 11403 |
代理人 |
姚文新;陈宙 |
主权项 |
一种数据采集方法,其特征在于,包括:数据采集周期到达时,确定本系统的当前系统时间;根据所述当前系统时间,以及预设的延迟时长计算出时间戳上限;根据计算出的时间戳上限,以及预设的第一采集时长计算时间戳下限;采集各业务系统中所述时间戳上限与时间戳下限所标示的时间范围内的数据。 |
地址 |
100123 北京市朝阳区姚家园路105号3号楼10层1102 |