docker
文章平均质量分 89
想拥有一片海
这个作者很懒,什么都没留下…
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
Flink on yarn执行Wordcount
Flink on yarn执行Wordcount一、写在前面二、实验环境三、两种在 yarn 上运行的模式3.1 Session-cluster 模式3.2 Per-Job-Cluster 模式启动方式一、写在前面以Yarn模式部署Flink任务时,要求Flink是有 Hadoop 支持的版本,Hadoop 环境需要保证版本在 2.2 以上,并且集群中安装有 HDFS 服务。二、实验环境本机:win 10 专业版;WSL:Ubuntu 20.04 TS;docker:19.03Hadoop原创 2021-01-22 10:28:10 · 1935 阅读 · 0 评论 -
WSL中Docker内Flink高可用集群搭建
WSL中Docker内Flink集群搭建一、实验内容二、实验环境三、环境说明一、实验内容在docker内搭建Flink集群。二、实验环境本机:win 10 专业版;WSL:Ubuntu 20.04 TS;docker:19.03Hadoop:2.7.4zookeeper:3.4.9Flink:1.7.2三、环境说明WSL是安装于windows中的linux系统,具体介绍安装请参考https://www.jianshu.com/p/6b02948b3d37总体环境如下:...原创 2021-01-09 21:38:13 · 1146 阅读 · 1 评论 -
采用Flume作为Spark Streaming数据源的编程实践
采用Flume作为Spark Streaming数据源的编程实践一、Flume的安装和使用1. flume 的下载2. 写环境变量3.修改配置文件4.验证是否安装成功2.写在前面我的spark集群的配置状态:我使用的是windows系统,安装了wsl子系统(Ubuntu),然后在Ubuntu中安装了docker,搭建了一个master两个slave的centos集群。一、Flume的安装和使用1. flume 的下载官网:http://flume.apache.org/download.htm原创 2020-12-31 15:18:54 · 1718 阅读 · 2 评论 -
IDEA连接wsl内docker的spark集群(scala版)
IDEA连接wsl内docker的spark集群前提条件已经在Ubuntu系统中配置完成spark集群!!!写在前面:我的环境基本如下图:在win 10中安装wsl(Ubuntu),然后在这个Ubuntu子系统中使用docker搭建了spark集群。节点IPmaster172.17.0.2slave1172.17.0.3slave2172.17.0.4windows的IP信息:Ubuntu系统的ip信息:Ubuntu系统的ip信息较多,但是大原创 2020-12-07 09:37:24 · 1470 阅读 · 1 评论 -
Error response from daemon: OCI runtime create failed: container_linux.go:319: getting the final chi
Ubuntu 20.04LTS搭建docker出错:docker: Error response from daemon: OCI runtime create failed: container_linux.go:349: starting container process caused "process_linux.go:319: getting the final child's pid from pipe caused \"EOF\"": unknown.docker: Error respon原创 2020-11-30 16:07:00 · 6157 阅读 · 0 评论
分享