超级会员免费看
这篇博客详述了如何在Ubuntu节点上安装Docker，包括安装步骤、验证和设置开机启动。接着，介绍了Hadoop完全分布式安装配置的详细过程，包括JDK安装、环境变量配置、主机名与免密登录设置、Hadoop的安装与配置。此外，还涵盖了Spark on Yarn和Flink on Yarn的安装配置，包括提交执行Spark和Flink应用程序的命令。整体内容是针对大数据平台搭建的实践指南。
文章目录
- 一、环境说明
- 二、在ubuntu节点上安装Docker
- 三、实验所需安装包
- 任务一：Hadoop 完全分布式安装配置
- 任务二：Spark on Yarn安装配置
- 任务三：Flink on Yarn安装配置
一、环境说明
- 服务端登录地址详见各模块服务端说明。
- 补充说明：宿主机可通过Asbru工具或SSH客户端进行SSH访问；相关软件安装包在宿主机的/opt目录下，请选择对应的安装包进行安装，用不到的可忽略；所有模块中应用命令必须采用绝对路径。
- 从本地仓库中拉取镜像，并启动3个容器
进入Master节点的方式为docker exec –it master /bin/bash
进入Slave1节点的方式为docker exec –it slave1 /bin/bash
进入Slave2节点的方式为docker exec –it slave2 /bin/bash - 同时将/opt目录下的所有安装包移动到3个容器节点中。
订阅专栏 解锁全文
扫一扫
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
