大泡泡的专栏

由于搜狗的反爬原因，不能直接对搜狗上面检索结果进行抓取，首先应先对操作进行抓包分析： 一、抓包分析： 1、搜狗微信公众号检索界面： 2、抓包获取对应的HTTP Referer： HTTP Referer是header的一部分，当浏览器向web服务器发送请求的时候，一般会带上Referer，告诉服务器我是从哪个页面链接过来的，服务器藉此可以获得一些信息用于处理。比如从我主页上链接到一个朋友那里

HTTP状态码(HTTP Status Code) 是当我们访问网页服务器，服务器做出相应的状态的3位数的数字代码。主要包括“1xx”（消息）、“2xx”（成功）、“3xx”（重定向）、“4xx”（请求错误）和“5xx”或“6xx”（服务器错误）五种不同类型。比较常见的状态码有： HTTP: Status 200 – 服务器成功返回网页 HTTP: Status 404 – 请求的网页不存在

一、分析： 新榜地址：这里写链接内容 接口发现： http://www.newrank.cn/xdnphb/data/weixinuser/searchWeixinDataByCondition 请求方式：post表单数据： - filter: - hasDeal:false - keyName:汽车 - order:NRI - nonce:8f44b75a9 - xy