cdh5.12安装spark2时，客户端配置 (id=12) 已使用 1 退出,而预期值为 0

最新推荐文章于 2020-12-23 01:22:59 发布
最新推荐文章于 2020-12-23 01:22:59 发布
阅读量421 收藏
点赞数
分类专栏： 遇到的问题
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/wyee000/article/details/95988765
版权
博客指出cm安装spark时，不会从环境变量查找Java，而是去/usr/java/default查找。虽未给出具体解决方法，但点明了问题所在，这在大数据开发中是常见的配置问题。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

因为cm安装spark不会去环境变量去找java，而是去/usr/java/default查找
解决方法：

mkdir /usr/java
ln -s /opt/module/jdk1.8.0_144/ /usr/java/default
spark教程3 (cdh5.12 添加 spark2.2 服务)
lief2liu
06-06 1984
1.下载安装包 ssh到任一台集群中的节点 cd /opt/cloudera/csd wget http://archive.cloudera.com/spark2/csd/SPARK2_ON_YARN-2.2.0.cloudera2.jar cd /opt/cloudera/parcel-repo wget http://archive.cloudera.com/spark2/pa...
CDH5.12部署文档（亲测有效）
10-24
测试通过的CDH部署文档 需要3台虚拟机 一台作为master 两台作为slave
CDH5.12.0安装部署
潇洒人生的博客
06-17 646
CDH5.12.0安装部署
大数据平台 CDH5.12.2 安装部署
weixin_34217711的博客
04-10 284
一：初始化环境部署配置 二： CDH 5.12.2 部署处理 一： 初始化环境部署处理 1.1 环境准备： Centos7.3x64 所有主机名配置 配置好 所有机器的无密钥登陆 1.2 主机名配置 172.17.100.131 node01.yangyang.com node01 172.17.100.132 node02.yangyang.com node02 172....
CM5.12.1离线安装spark2.2
强者的博客
08-23 1023
在CDH集群中spark1和Spark2版本可以共存，为了更好的体验及使用Spark新版本的API或修改已知旧版本的bug，现需要将CDH集群中安装Spark2.2，本节主要介绍如何通过Cloudera Manager离线安装Spark2.2。
CDH5部署spark客户端报错JAVA_HOME is not set
阿正的博客
03-28 385
/usr/bin/mkdir -p /usr/java/usr/bin/ln -s /usr/local/java_home/usr/java/default 参考：http://www.aboutyun.com/thread-23764-1-1.html http://blog.sina.com.cn/s/blog_5d9aca630101pxr1.html
Cloudera Manager CDH 5.12部署安装
08-30
CDH部署安装文档，纯手敲非复制，有截图，一看就懂
基于CDH 6.3.0 搭建 Hive on Spark 及相关配置和调优
05-25
### 基于CDH 6.3.0 搭建 Hive on Spark 及相关配置和调优 #### 概述 随着大数据技术的发展，Hadoop生态系统不断成熟与完善，其中Apache Hive作为数据仓库工具，支持通过SQL语句进行查询、分析存储在Hadoop文件系统...
CDH5.12&CDH6.0安装文档.zip
07-20
2. **Kerberos安全**：CDH6.0强化了Kerberos认证，增强了数据安全性，安装时需预先配置Kerberos环境。 3. **Hive Metastore分离**：Hive元数据存储独立于HDFS，提高了查询性能。 4. **新组件**：如Impala 3.x，...
CDH上安装spark2的操作说明
11-16
### CDH上安装Spark2的操作说明 #### 一、引言 随着大数据处理技术的不断发展，Apache Spark作为一款快速、通用的大数据处理引擎，在实际应用中的需求也日益增长。为了更好地利用Spark的强大功能，有时我们需要在...
spark2-2.4.0.cloudera2-1.cdh5.13.3.p0.1041012-el6.zip
04-23
".parcel"文件是Cloudera的部署单位，包含可分发的软件组件，"SPARK2-2.4.0.cloudera2-1.cdh5.13.3.p0.1041012-el6.parcel"即是Spark 2.4.0的 parcel 文件，用于在CDH集群中安装和管理Spark。".parcel.sha"文件是...
cdh5.12.1安装详细过程
04-10
cloudera manager cdh5.12.1安装文档，安装系统 centos7
RHEL7.2-CDH5.12.1安装部署
11-22
RHEL7.2操作系统离线安装CDH5.12.1，该安装文档需要具备一定的Linux操作系统知识才能操作并解决一些简单问题
cloudera manager报错“客户端配置 (id=3) 已使用 1 退出,而预期值为 0”
weixin_33950035的博客
06-21 576
为什么80%的码农都做不了架构师？>>> ...
CDH spark客户端安装错误
叁木大数据
07-24 597
CDH客户端安装错误 一、问题描述 在安装Spark客户端时有两台机器安装成功但是有一台安装失败，并报错退出。 二、问题解决思路 查看启动日志。 发现启动失败的那台机器调用jdk时失败 三、解决思路 spark安装客户端时没有去找环境变量中的jdk,而是找的/usr/java目录下的 所以只需要把jdk路径软连接到 /usr/java/default目录下（如果没有default目录则创建）...
CDH-5.12.2安装教程
weixin_30817749的博客
10-13 241
CDH是Cloudera公司提供的Hadoop发行版，它在原生开源的Apache Hadoop基础之上，针对特定版本的Hadoop以及Hadoop相关的软件，如Zookeeper、HBase、Flume、Sqoop等做了兼容性开发，我们在安装CDH发行版的Hadoop时就无需进行额外繁琐的兼容性测试。 以往安装配置使用Apache Hadoop时，完全需要手动在服务器上，通过...
spark客户端配置
weixin_42658788的博客
11-28 963
spark客户端配置 一、需已安装 hadoop客户端 hive客户端 jdk1.8 二、配置文件 spark-2.3.2-bin-hadoop2.6.tgz 三、配置客户端 tar -zxvf spark-2.3.2-bin-hadoop2.6.tgz -C /opt/beh/core 将hadoop配置文件core-site.xml,hdfs-site.xml,yarn-site.xml拷贝到...
关于cdh 5.X 的agent 客户端镜像安装注意事项
weixin_30278311的博客
07-04 103
当把客户端镜像安装时，每个客户端程序会生成UUID作为唯一标识，重新 安装时要删除 rm -rf /var/lib/cloudera-scm-agent 如果不删除会造成主机列表中IP一直在变的情况。 转载于:https://www.cnblogs.com/net2817/p/9264945.html...
CDH5.13.0版本集群安装更新spark2部署及问题汇总（史上最全，无坑）
weixin_51485976的博客
12-23 576
一、简介： 在我的CDH5.13.0集群中，默认安装的spark是1.6版本，这里需要将其升级为spark2.x版本。 经查阅官方文档，发现spark1.6和2.x是可以并行安装的，也就是说可以不用删除默认的1.6版本， 可以直接安装2.x版本，它们各自用的端口也是不一样的。这里做一下安装spark2.1版本的步骤记录。 二、安装准备 csd包：http://archive.cloudera.com/spark2/csd/ SPARK2_ON_YARN-2.2.0.cloudera2.jar parcel包
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值