- 博客(6)
- 收藏
- 关注
原创 基于docker搭建跨主机的spark集群并配置notebook(二)
上一篇文章制作好了docker镜像,现在在两台服务器上部署spark集群宿主机1IP:192.168.0.21 ;宿主机2IP:192.168.0.30(一)在宿主机安装weave,使不同宿主机的容器之间能够互相通信参考: Docker学习笔记 — Weave实现跨主机容器互联(二)实现宿主机1到宿主机2的ssh免密登录参考: CentOS下SSH无密码登录的配置(三)
2017-03-06 15:31:38
1616
原创 基于docker搭建跨主机的spark集群并配置notebook(一)
一、制作docker镜像知识水平尚有欠缺,对于dockerfile那一套理论也不熟悉,所以采取的制作一个docker镜像作为启动集群的载体:(一)在宿主机安装docker:不同的系统安装docker的方法
2017-03-06 14:05:06
2014
原创 ubuntu 14.04 Spark单机环境搭建与实例使用
一.java环境下载jdk安装包解压进入/opt/目录设置环境变量$gedit /etc/profile在最后添加export JAVA_HOME=/opt/jdk1.8.0_60export JRE_HOME=${JAVA_HOME}/jreexport CLASSPATH=.:${JAVA_HOME}/lib:${JRE_HOME}/libexport PAT
2016-03-04 15:52:25
1090
转载 vs 2010链接到Mysql数据库
一.准备工作1.下载Mysql的Connecter :connector c/c++,含有include和lib两个文件夹 ;2.新建一个vc++ 空项目;解决方案平台 win 643.项目属性->"C/C++"->常规,在“附加包含目录”中 将"include"及"include\cppconn"的路径包含进来。4.若在debug下,属性->配置属性->链接器->常规,在“附
2015-12-06 20:25:17
2679
原创 安装mongoDB
1.下载msi64位2.custom安装(kb2731284补丁)3.在data文件夹下创建db,log文件夹4.切换到D:\MongoDB\Server\3.0\bin 目录执行如下命令:mongod --dbpath D:\MongoDB\Server\3.0\data\db 执行完如下图5. mongodb安装成windows 服务 在D:\MongoDB\Serv
2015-12-06 20:21:14
321
原创 关于在Ubuntu下安装nodejs以及使用addons API的一系列命令。
一.Ubuntu下安装nodejs # apt-get update # apt-get install -y python-software-properties software-properties-common # add-apt-repository ppa:chris-lea/node.js # apt-get update
2015-12-02 12:42:14
399
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人