在Mesos上运行Spark:全面指南
1. 高可用主节点设置
与Spark独立集群类似,Mesos可以设置多个主进程。主进程借助ZooKeeper在它们之间选举出一个领导者。若领导者出现故障,备用主节点会再次利用ZooKeeper选举出新的领导者。
2. 安装和配置Mesos
官方推荐从源代码构建安装Mesos,但如果运行的是Mesosphere支持的Linux版本,从Mesosphere软件包仓库安装会更快捷简便。以下是在Ubuntu上从Mesosphere安装Mesos的步骤:
1. 设置仓库 :
$ sudo apt-key adv --keyserver keyserver.ubuntu.com --recv E56151BF
$ echo "deb http://repos.mesosphere.io/ubuntu trusty main" | \
sudo tee /etc/apt/sources.list.d/mesosphere.list
- 安装包 :
$ sudo apt-get install mesos
- 在主节点安装Zookeeper :
超级会员免费看
订阅专栏 解锁全文
1349

被折叠的 条评论
为什么被折叠?



