asnowdream的博客

文章目录IP限制反爬虫机制Headers反爬虫机制UA反爬虫机制说起网络上这个网络蜘蛛最让程序员头疼的就是反爬机制，爬虫其实就是模拟浏览器获取数据，反爬虫机制就是过滤这些不正常的访问及数据获取，对于一些古老的应用没有反爬虫机制这样一来程序员爬虫就是海阔任鱼跃，但是对于一些应用广泛的应用会更新加上一些反爬虫机制，那么接下来让我们了解一下常见的反爬虫机制及应对策略。IP限制反爬虫机制有一些网站会...

文章目录介绍什么是Cookie什么是Sessioncookie和session的区别session的生命周期介绍在我们身边的网络中就充满着它的身影，不信我接下来就说说，我们生活中通常在浏览器淘宝上浏览一个商品不购买，然后打开腾讯视频会有好多的广告推送都是关于那个商品的，那么我们就没有思考过这是什么原因，其实这都是以为一个原因，浏览器会通过每台电脑记录下行为，储存在Cookie和Session中...

文章目录HTTPGet请求方法Post请求方法Get请求和Post请求有何不一样呢HTTPHTTP是基于TCP/IP的关于数据如何在万维网中如何通信的协议Get请求方法Get是基于HTTP通信协议的一种请求方法，底层也是TCP/IP，是TCP连接，对于Get方式的请求，浏览器会把http header和data一并发送出去，服务器响应200(返回数据)，直观点看Get把参数包含在URL中，...

HTTP工作原理HTTP协议采用了请求/响应模型，客户端向服务器发送一个请求报文，请求报文包含请求的方法、URL、协议版本、请求头部和请求数据。服务器以一个状态行作为响应，响应的内容包括协议的版本、成功或者错误代码、服务器信息、响应头部和响应数据。那么HTTP请求/响应的步骤 有哪些呢？1、 客户端连接到Web服务器一个HTTP客户端，通常是浏览器，与Web服务器的HTTP端口（默认为80...

文章目录什么是HTTP协议HTTP协议中的请求与响应什么是HTTP协议在Java web应用中，服务器把网页传给浏览器，通俗的说就是把网页的HTML代码发送给浏览器，让浏览器显示出来，其中浏览器与服务器之间的传输协议就是HTTP。HTTP协议中的请求与响应我们在生活中运用浏览器的域名来访问服务器，但是这种访问和我们直接用IP地址访问是一样的，因为最终它会转化为IP地址访问。其中包括Ge...