一种网络采集处理异步加载数据的方法

摘要

本发明提供一种网络采集处理异步加载数据的方法，其具体实现过程为：通过模拟浏览器，获取网页信息，分析网页是否含有异步请求的内容：如果含有，则进一步采集异步数据；如果不含有，直接采集页面数据；分析含有异步数据的网页代码，发现其中异步请求的方法，即寻找异步请求地址；异步方法进行解析，分析其延伸事件，推导异步请求地址规律，配置相关工具实施数据采集；对返回数据进行解析、存储。该一种网络采集处理异步加载数据的方法和现有技术相比，实用性强，页面加载及时，保证页面打开顺畅性，增强用户体验，适用范围广泛，易于推广。

主权项

一种网络采集处理异步加载数据的方法，其特征在于其具体实现过程为：步骤一，通过模拟浏览器，获取网页信息，分析网页是否含有异步请求的内容：如果含有，则进一步采集异步数据；如果不含有，直接采集页面数据；步骤二，分析含有异步数据的网页代码，发现其中异步请求的方法，即寻找异步请求地址；步骤三，异步方法进行解析，分析其延伸事件，推导异步请求地址规律，配置相关工具实施数据采集；步骤四，对返回数据进行解析、存储。