获取网络数据的系统和方法

摘要

本发明提供一种获取网络数据的系统和方法，能够提高获取网页动态数据的效率。该系统包括：抓包模块，用于从网络转发装置所转发的数据中获取服务器向客户端发送的响应数据，所述网络转发装置用于在所述服务器和所述客户端之间进行数据转发；输出模块，用于输出所述响应数据。

主权项

一种获取网络数据的系统，其特征在于，包括：抓包模块，用于从网络转发装置所转发的数据中以抓包的方式获取服务器向客户端发送的响应数据，所述网络转发装置用于在所述服务器和所述客户端之间进行数据转发；所述客户端处于本地网络中；本地网络中配置有所述网络转发装置；输出模块，用于输出所述响应数据；触发模块，用于触发网页中的翻页按钮从而使所述服务器发送该网页的下一页网页的数据；分析模块，用于比较所述服务器响应翻页之后的网页提交的请求信息而发送的动态数据的地址与所述服务器响应翻页之前的网页提交的请求信息而发送的动态数据的地址，根据比较得到的地址之间的区别确定多个地址，所述多个地址是所述服务器响应于多次翻页操作时发送的动态数据的地址；获取模块，用于获取所述多个地址中的数据；保存模块，用于保存所述获取模块所获取的数据。