weixin_44201223的博客

Playwright 是一个用于自动化浏览器操作的开源工具，由 Microsoft 开发和维护。它支持多种浏览器（包括 Chromium、Firefox 和 WebKit）和多种编程语言（如 Python、JavaScript 和 C#），可以用于测试、爬虫、自动化任务等场景。总之，Playwright 是一个功能强大、跨浏览器、跨平台的浏览器自动化工具，相比于 Selenium 和 pyppeteer，它具有更快的执行速度、更高的稳定性和更广泛的浏览器支持，适用于多种自动化操作和爬虫场景。

【代码】爬虫滑动验证与文字点击验证。

HTTP协议是Hyper Text Transfer Protocol（超文本传输协议）的缩写,是用于服务器与客户端之间传输超文本的传送协议。超文本：超文本就是指“含有指向其他资源链接”内容的文本。大概就是，不仅仅是文字，还有多媒体：视频、图片、动画等。协议：HTTP协议就是服务器（Server）和客户端（Client）之间进行数据交互（相互传输数据）的一种形式。我们可以将Server和Client进行拟人化，那么该协议就是Server和Client这两兄弟间指定的一种交互沟通方式。

什么是代理代理服务器的作用在爬虫中为何需要使用代理？代理的匿名度代理的类型（重要）如何获取代理?

【代码】pandas数据表格基础使用。

【代码】xpath基础使用。

【代码】bs4基本使用。

就是通过编写程序，“模拟”浏览器上网，然后让其在互联网中“抓取”数据的过程。提问：如果日后你的爬虫程序没有爬取到你想要的数据，why？

首先来讲，cookie是浏览器的技术，Cookie具体指的是一段小信息，它是服务器发送出来存储在浏览器上的一组组键值对，可以理解为服务端给客户端的一个小甜点，下次访问服务器时浏览器会自动携带这些键值对，以便服务器提取有用信息。记住：cookie表示的键值对数据是由服务器创建，且存储在客户端浏览器中。

HTTP协议是Hyper Text Transfer Protocol（超文本传输协议）的缩写,是用于服务器与客户端之间传输的传送。超文本：超文本就是指“含有指向其他资源链接”内容的文本。大概就是，不仅仅是文字，还有多媒体：视频、图片、动画等。协议：HTTP协议就是服务器（Server）和客户端（Client）之间进行数据交互（相互传输数据）的一种形式。我们可以将Server和Client进行拟人化，那么该协议就是Server和Client这两兄弟间指定的一种交互沟通方式。

Browser浏览器，其实也是一种Client客户端，只是这个客户端不需要大家去安装什么应用程序，只需在浏览器上通过HTTP/HTTPS协议请求服务器端相关的资源（网页资源）即可。B/S即：Browser与Server,中文意思：浏览器端与服务器端架构。爬取服务器端的指定数据。