m0_61791601的博客

本问包含内容，Ajax数据获取，线程池简单使用，xlwt模板数据写入exel有时候我们在用requests抓取页面的时候，得到的结果可能和在浏览器中看到的不一样在浏览器中可以看到正常显示的页面数据，但是使用requests得到的结果并没有。下面我们以新发地为例获取Ajax动态加载的内容。...

前言：对于HTML对象的检索，我们可以使用正则表达、CSS选择器、Xpath、Beautiful Soup和PyQuery等解析库检索目标信息。正则表达的检索效率一般是比较慢的，但是正则表达式对部分相同节点的html文本进行检索效率较快。因为对于相同节点的部分html文本，无法从父节点和class节点来确定目标文本的位置，而正则表达式可以快速的检索出目标文本。正则表达式：正则表达式：又称规则表达式。（英语：Regular Expression，在代码中常简写为regex、regexp或RE

有点闲适不知道看什么才好，那可以看看大众的口味。我们将爬取各类国创，番剧等视频在榜作品，看看那些视频收到大家的喜爱。（虽然没人会用爬虫来看番）目录一、📝分析爬取网页1.分析url2.分析网页原码二、💫分析爬取过程三、✏代码实现1.导入类2.初始化3.获取爬取类别和构造对应url4.获取相关信息并将数据储存为csv文件5.运行文件四、📜完整代码本文爬虫用到的各类函数和库import re ​​​​​ import time import csv