(1)首先登录快递100首页,此时先看下获取到的cookies,稍后会用到
(2)找到获取快递公司名称的异步请求
(3)找到获取快递信息的请求(此处是难点),先查看请求参数,type是上一步获取到的快递公司名,postid是快递单号,temp推测是随机数,phone不用填写
根据我上一篇博客来到对应的参数计算公式https://blog.youkuaiyun.com/weixin_43868179/article/details/94164236
根据下图,发现temp就是个随机数
于是把参数准备好,请求头写好User-Agent和Referer写代码测试,发现不行,于是猜测应该是请求头里面有文章,应该是cookies的问题.把请求头中的cookies复制出来再测试一下,代码生效了。
于是检查下cookies,先百度csrftoken
Java 关于爬取网站数据遇到csrf-token的分析与解决
链接上说,他是上一次请求获取的,于是查看下请求头的host网页,就是主页嘛,于是回头看访问主页时获取到的cookies,见图1,正好就是和请求头中记录的cookies一样的。
hm_lpvt***和Hm_lvt***也顺带百度了下