Walker990的博客

段子爬取 这次解析使用的re import requests import re class Spider: def __init__(self): self.page = 1 self.switch = True def getConnect(self): """ 获取html,使用re库解析出想要的内容 ...

爬取的是美女贴吧中的图片 代码如下： import requests from lxml import etree import urllib class Tieba: def __init__(self, name, start_page, end_page): self.headers = {"User-Agent": "Mozilla/5.0"} s...

泰国旅游信息爬取 # _*_ coding:utf-8 _*_ import requests from lxml import etree import json class BangkokTravel: """ 爬取取曼谷旅游的信息 """ def __init__(self): pass def getPage(self): ...

1.打开Anaconda prompt然后, 输入：conda list 查看是否已经有scrapy，前提把anaconda配置到环境变量里 例如： 我的环境变量： 2.查看没有scrapy,执行conda install scrapy安装scrapy 安装时： 在Anaconda prompt 执行conda install scrapy安装scrapy后，回到第一步，查看 如果需要更新A...