发明名称 网站访问请求的管理方法、装置及系统
摘要 本发明公开了一种网站访问请求的管理方法及装置,该方法包括:拦截终端设备发起的网站访问请求,若网站访问请求并非通过浏览器发起,则将网站访问请求识别为网络爬虫请求,并拒绝网站访问请求,若网站访问请求通过浏览器发起,则根据预置时长内终端设备发起的所有网站访问请求的相关访问参数分析判断网站访问请求是否疑似网络爬虫请求,若疑似,则生成用于身份验证的二维码并返回给终端设备;若终端设备通过身份验证,则放行网站访问请求,若终端设备未通过身份验证,则将网站访问请求识别为网络爬虫请求,并拒绝网站访问请求。本发明可有效防止网络爬虫通过伪装成浏览器、利用IP地址代理或IP地址轮换等方式爬取网站数据。
申请公布号 CN105426415A 申请公布日期 2016.03.23
申请号 CN201510733749.1 申请日期 2015.10.30
申请人 TCL集团股份有限公司 发明人 邓宏栋
分类号 G06F17/30(2006.01)I;G06F21/41(2013.01)I;H04L29/06(2006.01)I 主分类号 G06F17/30(2006.01)I
代理机构 深圳中一专利商标事务所 44237 代理人 张全文
主权项 一种网站访问请求的管理方法,应用于网页服务器,其特征在于,所述方法包括:拦截终端设备发起的网站访问请求,判断所述网站访问请求是否通过浏览器发起;若所述网站访问请求并非通过浏览器发起,则将所述网站访问请求识别为网络爬虫请求,并拒绝所述网站访问请求,若所述网站访问请求通过浏览器发起,则获取预置时长内所述终端设备发起的所有网站访问请求的相关访问参数,根据所述相关访问参数分析判断所述网站访问请求是否疑似网络爬虫请求,所述相关访问参数包括:预置时长内所述终端设备每一次发起网站访问请求时使用的互联网协议IP地址、发起时间以及流量消耗;若所述网站访问请求非疑似网络爬虫请求,则放行所述网站访问请求,若所述网站访问请求疑似网络爬虫请求,则生成用于身份验证的二维码并返回给所述终端设备,使得所述终端设备通过扫描所述二维码进行身份验证;若所述终端设备通过身份验证,则放行所述网站访问请求,若所述终端设备未通过身份验证,则将所述网站访问请求识别为网络爬虫请求,并拒绝所述网站访问请求。
地址 516006 广东省惠州市仲恺高新技术开发区十九号小区