- 博客(3)
- 收藏
- 关注
原创 二.scrapy框架调试
1.在爬虫所在项目中,增加 main.py文件 from scrapy.cmdline import execute import sys import os sys.path.append(os.path.dirname(os.path.abspath(__file__))) execute(['scrapy', 'crawl', 'j...
2018-09-22 19:15:26
403
原创 pycharm中来调试 scrapy爬虫框架
一.在爬虫所在项目中,增加 main.py文件 from scrapy.cmdline import execute import sys import os sys.path.append(os.path.dirname(os.path.abspath(file))) execute([‘scrapy’, ‘crawl’, ‘jobbole’]) 二.shell 条件下调试 scrapy sh...
2018-09-22 19:14:56
373
翻译 一. 虚拟环境的创建及应用
同时装有python2和python3,该怎么区分py2和py3的scrapy 一. python2 -m scrapy startproject xxx python3 -m scrapy startproject xxx 二. 用virtualenv.然后再创建虚拟环境的时候,指定相应的Python版本. 具体操作命令: cd到你的工作路径 cd /tmp/workspace 创建虚拟环境 m...
2018-09-22 19:12:35
276
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人
RSS订阅