Mac下安装爬虫框架Scrapy

最新推荐文章于 2024-11-21 17:37:41 发布

卖二货的小青年

最新推荐文章于 2024-11-21 17:37:41 发布

阅读量4.8k

点赞数

分类专栏： python

python 专栏收录该内容

1 篇文章

订阅专栏

本文详细介绍了在Mac系统下安装爬虫框架Scrapy的三个关键步骤：删除默认Python、使用Homebrew安装最新Python并创建软链接、通过pip安装Scrapy，并附上安装完成后的使用命令。

Mac下安装爬虫框架Scrapy

发表于 2014-04-25 | 分类于开发 | 暂无评论

刚刚试了下可以，可以简化为下面三个步骤
一、删除Mac自带的Python

sudo rm -rf /usr/bin/python

二、homebrew安装最新的Python

brew install python

创建一个软链接

sudo ln -s /usr/local/bin/python /usr/bin/python

三、使用pip安装scrapy
使用homebrew安装完python后会自动安装好包管理工具pip，所以执行下面安装命令

pip install scrapy

安装完成后如下所示

machaismile$ scrapy
Scrapy 0.22.2 - no active project

Usage:
  scrapy <command> [options] [args]

Available commands:
  bench         Run quick benchmark test
  fetch         Fetch a URL using the Scrapy downloader
  runspider     Run a self-contained spider (without creating a project)
  settings      Get settings values
  shell         Interactive scraping console
  startproject  Create new project
  version       Print Scrapy version
  view          Open URL in browser, as seen by Scrapy

  [ more ]      More commands available when run from project directory

Use "scrapy <command> -h" to see more info about a command