集群如下:
192.168.188.111 master
192.168.188.112 slave1
192.168.188.113 slave2
1 .修改主机名及域名解析
1.1 修改主机名
[root@master ~]# vim /etc/hostname
输入master
同理在192.168.188.112和192.168.188.113分别修改为slave1和slave2.
1.2 修改域名hosts
[root@master ~]# vim /etc/hosts
127.0.0.1 localhost localhost.localdomain localhost4 localhost4.localdomain4
::1 localhost localhost.localdomain localhost6 localhost6.localdomain6
192.168.188.111 master
192.168.188.112 slave1
192.168.188.113 slave2
2.配置spark-2.1.0
<

本文详细介绍了如何在 Spark 2.1.0 中搭建集群,包括修改主机名和域名解析,解压缩Spark,配置slaves文件,设置master和worker节点,以及启动和验证集群的正确运行。通过这个过程,读者可以了解到完整的集群部署步骤。
最低0.47元/天 解锁文章
587

被折叠的 条评论
为什么被折叠?



