Jerry的博客

纯属娱乐，不过python是当下一门值得学的脚本语言import refrom multiprocessing.dummy import Poolimport requestsfrom flask import jsonfrom requests.exceptions import RequestExceptiondef get_one_page(url,headers): ...

最近学累了Java就会玩一会爬虫从一开始的urllib到requests再到正则，利用BeautifulSoup裤，Seleium库伪装浏览器模拟点击，代理反爬，直到今天的使用pyspider框架，拿一些JS渲染过的数据，其实最重要，最难得还是对网页的分析，慢慢学来。今天写了一个小爬虫来爬电玩巴士的游戏库中的基本信息，在pyspider中点击链接即可爬取数据，后期我想把它写成可以自动的，但是电...

准备工作：下载一些资源库使用Python3.6安装wheelpip install wheel第二步 下载lxml下载地址：https://www.lfd.uci.edu/~gohlke/pythonlibs/#lxml下载好以后，在cmd中输入pip install +下载好的文件地址路径第三步 下载PyOpenssl下载地址：https://pypi.org/proje...