发明名称 | 线程组织方法 | ||
摘要 | 一种线程组织方法。所述方法包括步骤:A、挂载点环路上一线程对其下一线程进行运行监测,检查有无故障,若有故障将问题线程从挂载点环路上摘下送入线程回收区,并判断所述故障是否是非首次发生,其中若所述故障属于非首次发生,则将所述下一线程任务标记为问题任务,问题任务不再执行,若所述故障属于首次发生,则直接进入步骤B;B、判断是否需要执行全局任务,若有回收任务则执行回收任务,回收所有线程回收区内的线程,并将没有问题任务标记的任务加入复活任务清单,若无回收任务则进入步骤C;C、判断复活任务清单中是否有需要复活的任务,若有则生成新线程执行该任务。利用本发明的线程组织方法,能够提高网络爬虫线程的运行稳定性。 | ||
申请公布号 | CN105302527A | 申请公布日期 | 2016.02.03 |
申请号 | CN201510716958.5 | 申请日期 | 2015.10.29 |
申请人 | 华北电力大学 | 发明人 | 马应龙;高延太 |
分类号 | G06F9/38(2006.01)I | 主分类号 | G06F9/38(2006.01)I |
代理机构 | 北京众合诚成知识产权代理有限公司 11246 | 代理人 | 张文宝 |
主权项 | 一种线程组织方法,所述方法包括步骤:A:挂载点环路上一线程对其下一线程进行运行监测,检查有无故障,若有故障,将问题线程从从挂载点环路上摘下送入线程回收区,并判断所述故障是否是非首次发生,其中若所述故障属于非首次发生,则将所述下一线程任务标记为问题任务,问题任务不再执行,若所述故障属于首次发生,则直接进入步骤B;B、判断是否需要执行全局任务,若有回收任务则执行回收任务,回收所有线程回收区内的线程,并将没有问题任务标记的任务加入复活任务清单,若无回收任务则进入步骤C;C、判断复活任务清单中是否有需要复活的任务,若有则生成新线程执行该任务。 | ||
地址 | 102206 北京市昌平区朱辛庄北农路2号 |