python3.6安装pyspider

本文介绍在Windows 10环境下如何安装Pyspider爬虫框架,包括pip、PhantomJS和Pyspider本身的安装步骤及解决特定错误的方法。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

win10下安装pyspider

1、pip

    我在安装pip的时候默认安装了Pip.

    如果没有的话:pip安装

2、PhantomJS

PhantomJS 是一个基于 WebKit 的服务器端 JavaScript API。它全面支持web而不需浏览器支持,其快速、原生支持各种Web标准:DOM 处理、CSS 选择器、JSON、Canvas 和 SVG。 PhantomJS 可以用于页面自动化、网络监测、网页截屏以及无界面测试等。

PhantomJS安装

3、Pyspider

直接利用pip安装

pip install pyspider

我在安装pyspider时遇到“Please specify --curl-dir=/path/to/built/libcurl ”的错误提示,折腾了很久才明白缺pycurl,在这个网站http://www.lfd.uci.edu/~gohlke/pythonlibs/下载安装。(很多直接安装不好使的扩展可以在这里下载)

安装.whl格式需要先安装wheel

pip install wheel

之后就可以直接安装了:

pip install pycurl-7.43.0-cp36-cp36m-win_amd64.whl

 

pyspider安装完成后再命令行输入:pyspider   如下效果

 

然后浏览器访问 http://localhost:5000

观察一下效果,如果可以正常出现 PySpider 的页面,那证明一切OK

 

转载于:https://www.cnblogs.com/thunderLL/p/6523788.html

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值