发明名称 |
一种分布式互联网信息下载系统及方法 |
摘要 |
本发明公开了一种分布式互联网信息下载系统及方法,首先由分发子系统接收用户的下载任务信息,并将下载任务信息发送到下载子系统;然后由下载子系统根据下载任务信息下载任务结果信息,并将任务结果信息发送到分发子系统;最后由分发子系统接收任务结果信息,并将任务结果信息回送给发起请求的用户。该系统物理环境包括了一个分发服务器和下载子系统群,系统的内部的工作方式是基于队列模型对需要获取的任务进行分配给下载子系统群,下载子系统群可以并发的处理所分配到的任务。该系统及方法适用于互联网的大数据量的采集,能够有效提高信息获取的效率及时效性。 |
申请公布号 |
CN103905515A |
申请公布日期 |
2014.07.02 |
申请号 |
CN201210587234.1 |
申请日期 |
2012.12.28 |
申请人 |
北大方正集团有限公司;北京大学;北京北大方正电子有限公司 |
发明人 |
阎磊;梁肖;于晓明;杨建武 |
分类号 |
H04L29/08(2006.01)I;H04L29/06(2006.01)I;G06F9/50(2006.01)I |
主分类号 |
H04L29/08(2006.01)I |
代理机构 |
北京天悦专利代理事务所(普通合伙) 11311 |
代理人 |
田明;任晓航 |
主权项 |
一种分布式互联网信息下载系统,包括用于接收与转发用户的下载任务信息、以及将任务结果信息回送给用户的分发子系统,以及用于接收分发子系统发送的下载任务信息并根据下载任务信息下载任务结果信息的下载子系统。 |
地址 |
100871 北京市海淀区成府路298号方正大厦 |