CDH 6.x版本WebUI界面安装agent时 无法复制安装文件

最新推荐文章于 2024-12-03 11:30:29 发布
最新推荐文章于 2024-12-03 11:30:29 发布
阅读量8.1k 收藏 1
点赞数 6
CC 4.0 BY-SA版权
分类专栏： ？CDH 文章标签： CDH6.x 安装agent失败
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/RONE321/article/details/94053671
本文分享了在CDH6.x版本中未安装TLS安全认证导致的问题及解决方案。作者在搭建CDH集群时跳过了TLS认证，结果在Manager端分发Agent到其他主机时遇到错误，无法复制安装文件。究其原因是同时缺乏TLS认证和从官网下载包的策略冲突。最终通过配置本地库解决了下载失败的问题。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

CDH 6.x版本踩过的坑

CDH搭建时没有装TLS安全认证（当时是直接跳过）
（如果装了TLS认证以后装组件service就比较麻烦 所以就跳过了Auto TLS认证）

就因为这一步，导致下面步骤 从manager端分发agent到其它主机报错

无法复制安装文件

为什么报这个错？
原因是你不仅没有安装TLS认证，你又想从官网上下载包，导致下载失败！

解决方案就是配置本地库喽~~~~~

在上一步选择public rep地方，改为本地库~！！！！
原生SUSE Linux下安装CDH5.14.x版本页面安装Agent出现域名bogon导致的失败
qq_36454119的博客
07-07 352
1.前提环境 从SUSE Linux官网下载的原生镜像SLE-12-SP2-Server-DVD-x86_64-GM-DVD1.iso 在VMware12下完成镜像安装，并通过挂在iso文件配置了zypper本地镜像源 安装CDH版本为CDH_5.14.2 2.问题复现 cm节点（cloudera manager）已安装完毕cloudera server服务 登录CDH页面，添加识别主机，识别到从节点nn和dn后，开始为从节点安装Agent服务 cm节点安装正常，nn和dn节点安装Agent失败
CDH WebUI无响应问题记录
Hiwes的博客
04-21 2216
CDH居然他娘的不显示状态了，原来要这么办！
CDH安装失败，如何重新安装
sysocc的博客
01-12 2374
CDH安装失败，如何重新安装
CDH6.1安装Install Agents错误总结
weixin_39062173的博客
06-20 7337
错误信息1 安装失败。 无法接收 Agent 发出的检测信号。 请确保主机的名称已正确配置。 请确保端口 7182 可在 Cloudera Manager Server 上访问（检查防火墙规则）。 请确保正在添加的主机上的端口 9000 和 9001 空闲。 检查正在添加的主机上 /var/log/cloudera-scm-agent/ 中的代理日志（某些日志可在安装详细信息中找到）。 错误...
cdh 安装 agent失败
langzi_hadoop的博客
11-16 814
rpm安装的方式： /var/lib/cloudera-scm-agent此目录如下文件是否有如下三个文件 cm_guid response.avro uuid 如果没有如下操作： 杀掉如下进程: netstat -anp |grep 9000 ps aux | grep super 重新启动agent
cdh集群安装--host配置问题导致agent失败
wflh323的专栏
07-05 1410
遇到几次有人在安装cdh的时候将hostname 配置成了带下划线 "_"，而导致agent安装失败，无法启动agent ，/var/log下无异常日志。异常配置如下： 192.168.1.1 cluster_01.example.com cluster_01 host 采用全域名标准配置，不要使用大写和 "_"下划线 示例: 192.168.1.1 cluster-01.example....
Centos.离线安装CDH..生产环境详细教程(含Spark.).docx
05-19
- **操作系统要求：** CentOS 6.x 或更高版本。 - **数据库要求：** 支持多种关系型数据库，如MySQL、PostgreSQL等。 - **JDK版本要求：** - **JDK7:** 所有更新版本从最低要求版本开始支持（除非特别排除）。...
CDH6配置Flink(编译安装)
qq_31886877的博客
09-09 2013
一、环境 CDH 6.1.1(Hadoop 3.0.0)、Flink 1.10.1、Centos7.4、Maven3.6.3、Scala-2.12和CDH的原生jdk1.8 二、安装包 1.flink1.10.1 tar包 https://archive.apache.org/dist/flink/flink-1.10.1/flink-1.10.1-src.tgz 其他版本可以通过该方法下载资源 [外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-2WuVWRyy-15996210
CDH 安装步骤
weixin_75004435的博客
12-03 1135
CDH（Cloudera Distribution for Hadoop）是一个由 Cloudera 提供的 Hadoop 生态系统的发行版，集成了 Apache Hadoop、Hive、HBase、Impala、Spark 等大数据处理工具。它为企业提供了一个易于安装、管理和扩展的 Hadoop 集群解决方案，并包含了增强的管理功能和企业级支持。CDH 提供了图形化的管理界面（Cloudera Manager）来简化集群配置、监控和故障排除，适合大规模数据处理和分析任务
CDH5.16.2三节点安装部署
qq_44003428的博客
01-09 839
1.安装虚拟机，最小化安装 2.设置相关参数： 设置ip地址：vi /etc/sysconfig/network-scripts/ifcfg-ens33 删除默认路由：DEFROUTE=yes 删除UUID 设置开机启动ONBOOT=yes 设置IPADDR=192.168.220.128 增加DNS:DNS1=114.114.114.114 DNS2=8.8.8.8 重启网卡：service network restart ping下外网是否正常 关闭防火墙：systemctl stop firewall
CDH安装错误集锦
weixin_42733888的博客
06-13 1045
CDH安装过程中出现的错误 1、iptables: /sbin/iptables 不存在 我是因为误删将 /sbin/下的文件删除了。 解决方法： yum install iptables 2、com.mysql.jdbc.execptions.jdbc4.CommunicationsException:Communication link failure 连接MySQL 的驱动包找不到。 解决方...
CDH安装失败了，如何重新安装
浅抒流年的博客
01-03 1043
CDH安装失败了，如何重新安装
cdh部署成功后无法安装集群无法进入安装向导
博客
01-06 435
cdh部署成功之后，登录后本应该出现安装向导，但是中间却是一片空白。 右下角有返回按钮，旁边继续按钮是一个灰框，没有文字，后来按了F12后，发现控制台console里有2个js文件未加载，1个js文件报错，以为是部署有问题，后来认为是访问了官网的资源，在host里加了官网还是不行。 最后发现是浏览器的问题，因为用的火狐浏览器安装了广告屏蔽插件，把js脚本给禁止加载了，着实坑了自己一把。 ...
CDH集群安装出现问题参考
萌兔兔MMQ！！
04-07 1653
一、登录Cloudera Manager (http://192.168.201.128:7180/cmf/login)时，无法访问web页面 针对此问题网上有较多的解决方案（e.g. https://www.cnblogs.com/zlslch/p/7078119.html)， 如果还不能解决你的问题，请看下面的解决方案。 登录MySQL数据库（或利用Navicat），会发现有一个mysql数据库（下图所示），在mysql数据库中有一个user表，将User="root"的两条记录进行删除 select
CDH安装常见错误以及解决方法
qq_35757427的博客
11-09 353
opt/cloudera-manager/cm-5.14.0/etc/init.d/cloudera-scm-server stop #停止server。/opt/cloudera-manager/cm-5.14.0/etc/init.d/cloudera-scm-agent stop #停止agent。#删除/opt/cloudera-manager/cm-5.14.0/lib/cloudera-scm-server-db/data/目录下内容。为CDH群集安装指定主机无法勾选。
CDH6报错解决全记录
sinat_28371057的博客
08-24 4695
一、服务器准备 1、服务器配置 准备3台服务器，建议最低配置如下（阿里云大约每台每月六百多）： centos7.4 8c 16G 39.101.192.109 node001 39.101.179.3 node002 39.99.236.205 node003 为服务器开启外网端口访问 7180、8900 2、下载安装包 把下面列出的共12个文件下载到一台文件服务器上 下载cdh文件到/var/www/html/cloudera-repos/目录 （1）https://archive.clou
那些年离线安装CDH集群的常识坑
weixin_39245293的博客
08-02 271
那些年离线安装CDH集群的常识坑 1、Hadoop集群主机host定义 一定要在hadoop集群的所有机器上都配上ip和主机名，一定是每台主机。 （否则，在集群安装的时候只能识别出一个主节点的主机，失败！） 操作如下： Vi /etc/hosts 然后添加主机群ip 2、集群的时钟同步 1.检查主机有没有安装ntp，一般都有自带:rpm -qa|grep ntp 没有的直接yum安装:yum install ntp 2.编辑主节点主机ntp配置文件vim /etc/ntp.conf： ①res
CDH5x离线安装+解决报错教程
李指导的博客
08-20 5783
CDH 集成了 Apache Hadoop 中各种相关组件，提供的 CM 服务提高了我们对于集群管理与安装的便捷性。温故而知新，在学习与使用的过程中也经常踩坑，所以做一些相关的总结，以下内容皆为个人理解的内容并非标准，如有异议之处，望指出。官方安装指南:CM的四大功能:1.管理：对集群进行管理，如添加、删除节点等操作。2.监控：监控集群的健康情况，对设置的各种指标和系统运行情况进行全面监控。3.诊断：对集群出现的问题进行诊断，对出现的问题给出建议解决方案。
cdh6.x版本需要收费吗
最新发布
07-11
<think>嗯，用户现在问的是CDH 6.x版本是否收费的问题。这个问题其实挺常见的，很多企业用户在考虑部署时都会关心成本问题。 从用户引用的资料来看，ta应该正在研究CDH 6.x的安装部署，可能是在做技术选型评估。用户之前还问过Hive和Impala的部署问题，说明ta对CDH生态有实际使用需求。 关于收费问题需要分几个层面来解释。首先CDH本身是开源软件，遵循Apache协议，理论上可以免费使用。但Cloudera提供的企业级功能和支持服务是需要付费的。用户特别提到6.x版本，这个版本确实是个分水岭，因为从6.3.3开始社区版和企业版就分道扬镳了。 我记得有个关键时间点是2021年1月，之后发布的CDH 6版本就不再包含免费的企业功能了。不过已经部署的6.3.3之前版本还可以继续使用。这个时间点对用户来说很重要，需要明确告知。 用户可能还不太清楚社区版和企业版的区别。社区版虽然免费，但缺少关键的企业级功能，比如Sentry权限管理、滚动升级这些。对于生产环境来说，这些功能其实很重要。 另外要提醒用户注意许可证变更的风险。有些公司在不知情的情况下使用了需要付费的版本，后来收到账单才傻眼。最好建议ta直接查看Cloudera官网的许可证说明，或者联系销售确认。 考虑到用户之前问过技术部署问题，ta可能是个运维工程师或者架构师。回答时要给出可操作的建议，比如如何检查当前安装的版本是否收费，以及替代方案的选择。Impala的收费情况也要单独说明，因为很多用户会用到这个组件。 最后可以建议用户考虑CDP，这是Cloudera现在的统一平台，但订阅模式需要付费。如果预算有限，社区版搭配其他开源组件也是个选择，不过要牺牲一些便利性。</think>关于CDH 6.x版本的收费问题，需结合版本发布时间和许可证政策综合判断，核心结论如下： ### 一、核心收费规则 1. **基础版本免费** CDH 6.x的基础框架（HDFS/YARN/Zookeeper等）始终保持**Apache 2.0开源许可**，可免费使用[^1][^4]。 2. **企业功能需订阅** 以下关键功能需购买Cloudera Enterprise订阅： - **高级管理功能**：滚动升级、配置历史追踪 - **安全组件**：Sentry/Ranger细粒度权限控制 - **运维工具**：跨集群复制(CCR)、诊断管理器 ```mermaid graph LR A[CDH 6.x] --> B(免费组件) A --> C(企业订阅组件) B --> D[HDFS/YARN/HBase] C --> E[Sentry权限管理] C --> F[滚动升级] C --> G[集群复制CCR] ``` 3. **版本时间分水岭** - **2019-2020年发布的6.x版本**：社区版(CDH)仍包含部分企业功能 - **2021年1月之后**：Cloudera终止免费企业功能，6.3.3+版本需订阅[^2] --- ### 二、具体收费场景 | 使用场景 | 是否收费 | 说明 | |-------------------------|----------|----------------------------------------------------------------------| | 仅使用HDFS/YARN计算框架 | 免费 | 可通过Parcel直接部署[^1][^4] | | 启用Kerberos认证 | 免费 | 引用[2]中的安全整合方案仍可免费实施 | | 使用Sentry权限控制 | 需订阅 | GRANT/REVOKE等SQL权限操作需企业许可[^2] | | 跨集群数据复制(CCR) | 需订阅 | 生产环境容灾方案 | | 使用Cloudera Manager | 部分免费 | 基础监控免费，自动化运维/报表需订阅 | --- ### 三、避坑指南 1. **版本选择建议** 若需免费使用企业功能： ```bash # 仅限6.3.3之前的版本（2021年前发布） CDH-6.3.2-1.cdh6.3.2.p0.1605554 # 引用[2][^3]中的版本可免费使用 ``` 2. **许可证检查方法** 在Cloudera Manager执行： ```bash curl -u admin:password http://cm-server:7180/api/v19/cm/license # 返回"status":"ACTIVE"表示需订阅 ``` 3. **替代方案** - 社区版CDH + Apache Ranger（替代Sentry） - 使用Apache Ambari管理集群（兼容CDH 6.x Parcel部署[^4]） > **关键提示**：生产环境若需使用Kerberos+Sentry（如引用[2]整合方案），从CDH 6.3.3起必须购买订阅，否则功能将被禁用[^2]。 --- ### 相关问题 1. 如何验证当前CDH 6.x集群是否需付费？ 2. CDH 6.x社区版与企业版的功能差异具体有哪些？ 3. 在CDH 6.3.2免费版本中如何配置Sentry权限控制？ 4. Cloudera订阅服务的成本构成是怎样的？ 5. 从CDH迁移至CDP（Cloudera Data Platform）的强制收费项有哪些？ [^1]: CDH Parcel部署方式说明 [^2]: CDH6.x与Kerberos整合的版本限制 [^3]: CentOS下CDH安装的版本兼容性 [^4]: CDH部署模式对比（Parcel/RPM）
评论 22
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值