网页资料下载控制系统及方法

摘要

一种网页资料下载控制方法，该方法包括如下步骤：设置需要下载的资料的网站地址；解析设置的网站地址下的一个网页的资料列表，以获得该资料列表的资料信息；计算该资料列表中全部资料的条数；获取解析得到的资料信息；判断资料列表中的各条资料是否已经下载；若有资料没有被下载，则生成资料列表中没有被下载的资料的脚本语言下载命令；通过生成的脚本语言下载命令下载对应的资料保存至数据库中；计算生成的脚本语言下载命令数；判断资料列表中全部资料的条数是否等于生成的脚本语言下载命令数；若资料的条数等于生成的脚本语言下载命令数，则执行翻页动作。另外，本发明还提供一种网页资料下载控制系统。

主权项

【权利要求1】一种网页资料下载控制系统，包括应用服务器及与该应用服务器相连的数据库，其特征在于，该应用服务器包括：设置模块，用于设置资料下载控制参数，所述的资料下载控制参数包括需要下载的资料的网站地址及允许下载的时间范围；解析模块，用于解析设置的网站地址下的一个网页的资料列表；获取模块，用于获取解析得到的该资料列表的资料信息，所述资料列表的资料信息包括各条资料的发布时间；计算模块，用于计算所述资料列表中全部资料的条数；判断模块，用于通过获取的资料信息来判断所述资料列表中的各条资料是否已经被下载在数据库中，及根据各条资料的发布时间判断该资料列表中的各条资料是否在允许下载的时间范围之内；生成模块，用于生成所述资料列表中还在允许下载的时间范围之内且没有被下载的资料的脚本语言下载命令；下载模块，用于通过生成的脚本语言下载命令下载对应的资料，并将下载的资料保存至数据库中；所述计算模块，还用于计算生成的脚本语言下载命令数；所述判断模块，还用于判断所述资料列表中资料的条数是否等于生成的脚本语言下载命令数；翻页模块，用于当所述资料列表中资料的条数等于生成的脚本语言下载命令数时，执行网页的翻页动作。