大数据爬虫基础
哪小吒圈子
这个作者很懒,什么都没留下…
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
大数据爬虫基础(三)Scrapy在ubuntu 16.04下的安装
Scrapy ubuntu下安装 系统:ubuntu 16.04 no gui 依赖包及依赖包的依赖包: 下列的安装步骤假定您已经安装好下列程序: http://scrapy.org/ Python 2.7 Python Package: pip and setuptools. 现在 pip 依赖 setuptools ,如果未安装,则会自动安装 setuptools 。 l原创 2016-04-24 09:07:52 · 4350 阅读 · 0 评论 -
大数据爬虫基础(一)ubuntu anaconda安装
ubuntu anaconda安装 环境:ubuntu server 14.04.03 python 2.7.11 1、下载: https://www.continuum.io/downloads#_unix wget http://repo.continuum.io/archive/Anaconda2-4.0.0-Linux-x86_64.sh 2、安装 https:原创 2016-05-16 09:56:59 · 5581 阅读 · 0 评论 -
大数据爬虫基础(二)Redis在ubuntu 14.04.03下安装
Redis安装 环境: ubuntu 14.04.03 amd64 python 2.7.10 参考:http://www.360doc.com/content/14/1021/16/3200886_418709516.shtml 下载: http://www.redis.io/download http://download.redis.io/releases/redis-3原创 2016-05-19 18:01:31 · 653 阅读 · 0 评论 -
大数据爬虫基础(三) MAVEN的安装配置和使用(上)
环境: ubuntu server 14.04.04 amd64 jdk1.8 1. 安装: http://www.jikexueyuan.com/course/571_4.html?ss=1 下载、解压、M2_HOME、PATH mvn -version 2. 使用 http://www.jikexueyuan.com/course/maven/ 2.1 java原创 2016-06-10 14:44:07 · 1069 阅读 · 0 评论 -
大数据爬虫基础(四)MAVEN的安装配置和使用(下)--JAVA简单爬虫
eclipse maven 环境: windows 10pro x64 jdk1.8 eclipse mars 1、安装设置maven插件 window->preferences->Installations->Add 具体见下边的参考链接一 2、新建maven project File->new project->maven project->maven-archetype-qui原创 2016-06-10 16:26:53 · 1362 阅读 · 0 评论 -
大数据爬虫基础(三)Scrapy在Windows 10下的安装
环境: Windows 10 x64 Anaconda python 2.7.12 1、依赖包的安装 Scrapy依赖项的安装 Scrapy的依赖项可以在这里进行下载:http://pan.baidu.com/s/13oRlq 安装lxml-3.2.4.win32-py2.7.exe(64位系统需要安装lxml-3.2.4.win-amd64-py2.7.exe) 安装pywin原创 2016-07-11 16:15:06 · 1578 阅读 · 0 评论
分享