基于爬虫模式的网络数据搜索方法

摘要

本发明提出了基于爬虫模式的网络数据搜索方法，所述方法包括：执行配置操作以设置配置文件；基于所述配置文件执行初始化操作，以生成基于正则表达式的目录页面和目标页面过滤器以及目标页面路径模板；基于所述目录页面和目标页面过滤器以及目标页面模板执行正式的爬取操作，以从确认的目标网页中获取并存储数据。本发明所公开的基于爬虫模式的网络数据搜索方法具有较高的通用性以及搜索准确性并且使用便捷。

主权项

一种基于爬虫模式的网络数据搜索方法，所述基于爬虫模式的网络数据搜索方法包括下列步骤：（A1）执行配置操作以设置配置文件；（A2）基于所述配置文件执行初始化操作，以生成基于正则表达式的目录页面和目标页面过滤器以及目标页面路径模板；（A3）基于所述目录页面和目标页面过滤器以及目标页面模板执行正式的爬取操作，以从确认的目标网页中获取并存储数据。