灵馨轩主人的博客

使用requests库 使用re模块清洗响应数据 从便民网站爬取常用电话，并将其写入文件，以便查询 代码如下： """ topic:爬取“便民查询网上的常用号码” author:小灵子 date:2019-5-31 思路：先从开发者工具找到相应请求头、url等等 <tr bgcolor="#EFF7F0"> <td>匪警</td> ...

爬取“豆瓣电影”网页数据并进行简单统计 练习知识点： requests模块、get方式请求 正则表达式、清洗数据 统计数据 代码中有详细注释，细节不再赘述 """ topic:爬取豆瓣电影数据，做一下简单分析 author:小灵子 date:2019-5-31 """ import re, requests """https://movie.douban.com/j/chart/top_l...

正则表达式、lxml、BeautifulSoup统统都用不上状况也是存在的，如果响应类型是json的话。 试着顺下面代码的思路对照下豆瓣电影的 request——response互动 """ topic:豆瓣是异步加载的，更神奇的是response的内容是json，我试着抓取 author:小灵子 date:2019-6-4 """ import requests import time def...