发明名称 |
一种数据获取方法和装置 |
摘要 |
本申请实施例提供了一种数据获取方法和装置,属于网络领域。包括:获取失败的数据爬取任务,其中,数据爬取任务至少包含:数据爬取失败的次数和数据爬取失败的时间;根据数据爬取失败的次数和/或数据爬取失败的时间,确定失败的数据爬取任务重新进行数据爬取的时间;根据重新进行数据爬取的时间,对失败的数据爬取任务执行重新数据爬取任务。通过根据数据爬取失败的次数和/或数据爬取失败的时间,确定失败的数据爬取任务重新进行数据爬取的时间,提高了数据获取的可靠性,提高了数据获取的效率。 |
申请公布号 |
CN106445966A |
申请公布日期 |
2017.02.22 |
申请号 |
CN201510489158.4 |
申请日期 |
2015.08.11 |
申请人 |
北京国双科技有限公司 |
发明人 |
李新国 |
分类号 |
G06F17/30(2006.01)I |
主分类号 |
G06F17/30(2006.01)I |
代理机构 |
北京万慧达知识产权代理有限公司 11111 |
代理人 |
代峰 |
主权项 |
一种数据获取方法,其特征在于,所述方法包括:获取失败的数据爬取任务,其中,所述数据爬取任务至少包含:数据爬取失败的次数和数据爬取失败的时间;根据所述数据爬取失败的次数和/或数据爬取失败的时间,确定所述失败的数据爬取任务重新进行数据爬取的时间;根据所述重新进行数据爬取的时间,对所述失败的数据爬取任务执行重新数据爬取任务。 |
地址 |
100086 北京市海淀区双榆树小区知春路76号翠宫饭店8层A间 |