lingtouyang的博客

注意：确保你已经有了python和pip可以通过cmd命令行简单地运行以下命令来检查：python --version您应该得到像3.6.2之类的一些输出。pip --version如果您使用python.org或Homebrew的安装程序来安装 Python，您应该已经有 pip 了。 如果您使用的是Linux，并使用操作系统的包管理器进行安装，则可能需要单...

问题：在使用pip install scrapy命令安装scrapy框架时，Twisted出现安装错误。如下：.......解决：1、查找安装过程中Twisted的版本，在命令窗上找到Collecting Twisted>=13.1.0 (from scrapy)..Downloading..这两行，如下：记住Twisted的版本号，我的是19.2.0。查...

1、安装Python虚拟环境的安装和配置，参考：https://blog.youkuaiyun.com/weixin_43209201/article/details/896738302、在创建好的虚拟环境Env中安装scrapy框架包，遇到twisted安装失败问题可参考：https://blog.youkuaiyun.com/weixin_43209201/article/details/89677795...

这说明缺少模块win32api，需要安装pypiwin32。注意：这个问题只在Windows中才会出现。解决办法：

解决办法：使用命令：python -m pip install selenium安装截图：selenium设计出来是做自动化测试的，正好 满足爬虫需求，所以用来爬虫。

Selenium从2升级到3之后呢，Selenium 3 相较于2最大的变化就是更加的标准化，可以支持更多的浏览器。那我们做自动化的时候如果用的是selenium3的话，首先要坐的就是下载不同浏览器的驱动。现在的驱动都是由各大浏览器自己更新提供。本人倾向于用chrome浏览器。下载地址：http://npm.taobao.org/mirrors/chromedriver/...

在pycharm新建一个test.py文件，输入一下代码：# _*_ coding=utf-8 _*_from selenium import webdriver#设置你自己的chormedriver存放路径driver_path = r"D:\ProgramApp\ChromeDriver\chromedriver.exe"driver = webdriver.Chrome(...