
机器学习( Machine Learning)
Darkness303
爱科学,爱祖国!!
展开
-
Ubuntu下搭建spark集群开发环境
之前在windows下搭建了一个spark的开发环境,但是后来发现如果想要搞spark streaming的例子的话在Linux下使用更方便,于是在Ubuntu下面搭建一下spark开发环境,记录以做备忘之用。1 .首先去spark官网下载相关软件,我这里用的是spark2.1.0版本http://spark.apache.org/downloads.html,对应的hadoop版本是2.7.原创 2017-10-23 12:10:24 · 1928 阅读 · 0 评论 -
hadoop-2.7.4完全分布式集群部署 外加测试例子mapreduce
更改系统时区(将时间同步更改为北京时间)xiaolei@hadoop1:~$ dateWed Oct 26 02:42:08 PDT 2017xiaolei@hadoop1:~$ sudo tzselect根据提示选择Asia China Beijing Time yes最后将Asia/Shanghai shell scripts 复制到/etc/localtimexiaolei@h...原创 2017-09-01 13:20:04 · 762 阅读 · 0 评论