spark
文章平均质量分 64
520SolarRain
这个作者很懒,什么都没留下…
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
spark分布式集群
使用centOS虚拟机搭建集群,先设置一个虚拟机节点作为master,另一个直接克隆,后修改配置,关闭防火墙,设置hostname,并通过ssh免密码登陆使master直接访问,最后完成集群搭建。创建虚拟机: vmware中添加centos的镜像,创建linux虚拟机。作为主节点master。安装配置 1.下载jdk:jdk-7u79-linux-x64.tar.gz 放入/usr/java原创 2015-12-17 21:56:04 · 713 阅读 · 0 评论 -
安装IPython 0.12.1
Ipython 是一个 python 的交互式 shell,比默认的python shell 好用得多,支持变量自动补全,自动缩进,支持 bash shell 命令,内置了许多很有用的功能和函数。ipython的安装对python的版本是有要求的。之前centos6.4的系统自带的python4,重装了python6后虽然ipython0.12.1可以安装,但运行spark的时候就出现问题了./bi原创 2016-01-09 13:16:16 · 650 阅读 · 0 评论 -
我的笔记本上的spark集群
—–为了学习spark 机器学习搭建的集群。为了防止我忘了,做以下说明使用的系统:centos7,32位 虚拟机1-master 节点位置:E:/32/CentOS 64位 (名字没起好) 虚拟机2-slave 节点位置:E:/32/centos slave1.spark版本:spark-1.2.0-bin-hadoop1,安装路径:/home/zyq/spark-1.2.0原创 2016-01-09 13:55:51 · 557 阅读 · 0 评论
分享