TheOneXIAOKUI的博客

分享一个爬虫小项目 豆瓣网电影top250 适用对象：初学者 要点知识： ① 数据过滤（正则） ② 分页 ③ 数据保存 细节特么的自己看代码 #-*- codeing = utf-8 -*- #@Time：2021/1/2814:32 #@Author：小魁 #@File：DouBan_Test.py #@Software：PyCharm import sys # 正则表达式，进行文字匹配 import re # 指定url，获取网页数据 import urllib.request,urllib.erro

《四维交通指数》爬取代码部分重点（部分数据的处理） 代码部分 class SiweiTrafficSpider(crawler.BaseCrawlSpider): # 设置时间间隔 custom_settings = {'DOWNLOAD_DELAY': 3} name = "siwei_traffic" def __init__(self,*args, **kwa...