周攀的博客

request库爬取汽车之家（get请求） 首先分析网页结构 查看网页源代码发现标题，图片url，福利和购买跳转链接id都在源码里有： 所以对于标题，福利，和图片url都在标签里，我们可以用xpath进行提取，而购买跳转链接id在json形式的字符串里，所以我们用正则表达式提取 代码如下： title=etree.HTML(req.text).xpath('//*[@id="list"]/ul/li[1]/a/div[4]/text()') newtitle=title[0].replace('\r\