centos7 + ambari 2.6安装与系统配置过程记录

CentOS7.8安装Ambari2.7.4 学而时习之,不亦说乎。由于工作需要,需要现搭建大数据测试环境,就快速攒了一个,记录一下过程。 这次用的是Ambari2.7.4,因为2.7.5有些资源下载不了,用它的原因就是图方便,赶时间,可以快速搭建平台,稳定性也不错。 主要参考了官方文档,仔细参照着部署是可以成功的,由于要使用国内镜像,还是有些不同,记录下来,当做总结。 文档地址:https://docs.cloudera.com/HDPDocuments/Ambari/Ambari-2.7.4.0/index.html 开始之前先查看支持列表 阅读详情

继上一篇博客记录如何u盘安装centos,centos7 u盘安装遇到的坑以及靠谱解决方法,继续写安装的ambari的过程。

安装的过程主要是参考这个博客的,CentOS 7.4 安装 Ambari 2.6.0 + HDP 2.6.3 搭建Hadoop集群

在安装过程出现了很多配置相关问题,分割线下主要罗列所有遇到问题以及解决方法。

------------------------------分割线------------------------------------

1.firewall-cmd --add-service=http 提示FirewallD is not running 错误

解决:systemctl start firewalld 开启防火墙,(参考自centos开启防火墙)

2.systemctl start firewalld 出现启动失败,出现以下错误。

Job for firewalld.service failed because the control process exited with error

code. See "systemctl status firewalld.service" and "journalctl -xe" for details

解决:由于系统python默认指向的是python3,而实际依赖的是python2,修改/usr/sbin/firewalld文件,将首行的/usr/bin/python改为/usr/bin/python2,问题顺利解决(参考自点击打开链接)

3.如果系统想要升级python版本到3.X

解决:主要是安装python3,然后加到系统环境中,(参考自点击打开链接),个人建议,多版本的话最好是用anaconda或者pyenv环境

4.利用ambari安装出现错误,java.io.FileNotFoundException: /var/run/ambari-server/bootstrap/1 (没有那个文件或目录)

解决:手动创建/var/run/ambari-server/bootstrap/1 这个目录,然后修改权限为777,使用命令

chmod -R 777 /var/run/ambari-server/bootstrap/,避免后面出现访问权限不足。

5.安装 ambari-agent时报错NetUtil.py-[SSL: CERTIFICATE_VERIFY_FAILED]

解决:修改/etc/python/cert-verification.cfg配置文件,将verify=disable,然后重启ambari agent,就可以正常注册。

6.安装ambari-agent时报错NetUtil.py:79 - SSLError: Failed to connect. Please check openssl library versions.Refer to: https://bugzilla.redhat.com/show_bug.cgi?id=1022468 for more details. 

未解决:

怀疑是OpenSSL版本过旧,尝试用yum install openssl,然后未出现更新,显示系统已经时最新的版本。重启安装依然出现同样的错误。

由于使用ambari安装出现这个错误后,折腾了一两个小时,一直无法解决,最终我放弃使用ambari安装组件了,直接在集群配置Hadoop与spark环境了。

欢迎有经验博友提供建议,帮助解决下第6个问题,谢谢!

centos7安装Ambari 2.7.5 + HDP3.1.5 准备 1.安装包准备: Ambari2.7.5、HDP31.5、libtirpc-devel: centos7操作系统: 链接:https://pan.baidu.com/s/1vzvio5rAMsbYF0-0vBs5dw 提取码:xij9 阅读详情

相关推荐

Ambari安装过程中异常问题记录

一.虚拟机克隆出现ip地址异常问题: 解决办法: 1. vi /etc/sysconfig/network-scripts/ifcfg-eth0 将UUID和HWADDR的配置注释掉,保存。 2.rm -rf /etc/udev/rules.d/70-persistent-net.rules 3.重启服务器:reboot 4.使用ifconfig查看,ip地址配置正常。 ...

fengfengchen95的博客 2064

CentOS7上安装Ambari2.5.2+HDP-2.6.2.0 (附:踩坑和解决办法)

配置环境呢,最喜欢的就是别人有现成的成功经验了,最气的是有些步骤别人的可以但是自己的就是不行。 所以我在后面附上了自己搭建过程中遇到的一些坑,可以借鉴采用。 软件及工具: 系统软件:CentOS7 VMvare创建2个虚拟机: master(6g内存,50g存储),node1(3g内存,40g存储) XSHELL:远程登录虚拟机操作使用   集群节点说明:(vim / etc...

weixin_39027420的博客 5832

ambari_hdp2.6.5+spark2.4安装过程遇到的问题

1.ambari安装时操作系统准备: 最好选择centos7 因为满足下面的要求(主要是 python2.7版本以上 openssl版本要求) 注意:openssl的build16 就是 abcd 字母顺序,16就是k 2.ambari安装确认主机报错: JDBC 报错: com.mysql.jdbc.exceptions.jdbc4.MySQL...

weixin_41588082的博客 1398

Ambari注册机器(Host Confirm)时遇到的两个问题(Centos7)

1、在Installing这步卡了好久,查看/var/log/ambari-server/ambari-server.log后发现如下错误: 解决方法:进入/var/run/ambari-server,手动创建bootstrap文件夹,并对其添加owner为ambari,即命令:chown ambari bootstrap,然后重新启动ambari-server restart,就好了。

小萌猿的博客 1万+

set_data_check专题[使用,report_timing,setup/hold检查]

set_data_check用于约束『数据-对-数据』的『建立保持』时间检查,通常被称为非时序约束 ( non-sequential constraints ), 理论上set_data_check 可以设在任意的两个data pin 上,其中一个pin 称为 constrained pin 类似于寄存器的data pin, 另一个pin 称为related pin 类似于寄存器的clock pin.

cy413026的博客 1万+

通俗易通解释SLAM问题的数学描述:运动方程和观测方程

高翔博士在他的《视觉SLAM十四讲》中把SLAM问题的数学描述抽象成了两个数学方程,以下对此做个总结,并且对此做一些通俗易懂的解释: 一、方程的总体形式 作为理性层次的描述,我们引入数学方程来描述SLAM过程,其中第一个方程叫做运动方程、第二个方程叫做观测方程,想象一下我们在研究SLAM的时候肯定需要观测机器人(无人汽车、无人机等都可以统称为机器人)的运动(画面感很强哈哈),这样很容易理解并且记忆这两个方程的名称和意义: 二、变量的含义 我们看到,这两个方程中有大量的英文字母作为变量存在其中,下面介绍一下

weixin_41855010的博客 7119

ambari+bigtop一键部署大数据集群坏境

搭坏境嘛,最头疼的就是明明按照别人一模一样的步骤,别人就可以成功,而我的就遇到各种奇奇怪怪的问题。结果折腾了半天到头来才发现几秒钟就解决了。最后面会补充我自己遇到的问题。

weixin_56786688的博客 3528

理解ADC:为什么需要抗混叠滤波器?

本文介绍 ADC 的混叠现象,引出抗混叠滤波器,并介绍一种开关电容滤波器,它具有很小的增益过渡带。

疯狂的运放 5951

ssh秘钥登录失败:invalid format

问题 vscode使用remote ssh插件配置免密登录服务器时出现一个问题:秘钥文件不起作用,还是需要输入密码 通过在cmd窗口输入:ssh -i "ssh私钥文件路径" 用户名@ip来检测秘钥登录时,出现报错:invalid format 解决 查阅资料后确认是该私钥文件后缺少一个换行符,所以只需使用记事本打开后敲个回车即可! 我出现该问题的原因:我是通过linuxcat命令拷贝私钥文件内容,然后再粘贴到Windows中创建的空文件中,由此丢失换行符~ 参考 vscode 免密登录参考:https:/

qq_27727147的博客 2万+

在 VS Code 里配置 SAP Joule for Developers 的 ABAP AI side-by-side 能力

摘要: 随着ABAP开发工具链的演进,VS Code逐渐融入ABAP开发流程,SAP Joule for Developers的ABAP AI能力通过side-by-side模式(基于BTP中央服务)为多系统开发提供统一AI支持。该模式避免了各ABAP后端独立升级AI能力的碎片化问题,由管理员配置BTP订阅URL后,开发者可在ADT或VS Code中全局调用。实际落地需注意角色分工(管理员配置服务,开发者填写URL)、AI units资源规划及配置细节(如区分全局与项目级设置)。建议将Joule URL纳入

2007 年 ~ 2025 年,深耕 SAP 技术 18 年 121

【VMware】win 10:VMware 15 虚拟机安装 win 7 系统

目录 一、准备虚拟机 二、win7 ghost ISO镜像文件下载 三、VMware新建虚拟机 四、VMware安装win7 五、解决vmware虚拟机屏幕没有适应窗口全屏问题 一、准备虚拟机 查看我的另一博文:【VMware】VMware Workstation Pro15 虚拟机永久激活破解安装教程 二、win7 ghost ISO镜像文件下载 百度网盘下载地址:点击前往下载...

顾三殇 —— 博客空间(软件测试) 11万+

ssh私钥文件登录问题:Load key invalid format

对mac和win的换行区别又加深了。

fxtxz2的专栏 1652

YOLO26改进 - SPPF模块 | 发论文神器!LSKA注意力改进SPPF,增强多尺度特征提取能力,高效涨点!!!

本文介绍了Large Separable Kernel Attention (LSKA)模块及其在YOLO26中的结合应用。LSKA旨在解决Visual Attention Networks (VAN)使用大内核卷积时的计算效率问题,通过将2D深度卷积层的卷积核分解为级联的水平和垂直1-D卷积核,降低了计算复杂度和内存占用,且使VAN更关注物体形状。我们将集成LSKA的SPPF_LSKA模块引入YOLO26,大量实验表明,改进后的模型在对象识别、检测、分割和稳健性测试上表现出色。

魔改工程师的博客 255

centos7安装ambari(亲自安装流程)

环境:centos7与centos6一样只是centos6与7有一些命令不一样,在centos6上安装请注意更换命令 刚安装完的centos7,所以我这上面缺少一些功能,后续会在使用中下载 先下载文件,很大 提前下载 http://public-repo-1.hortonworks.com/ambari/centos7/2.x/updates/2.6.2.2/ambari-2.6.2.2-cent...

weixin_42348946的博客 9872

第182期 Claude Skills:深入探究Anthropic的智能体框架(一篇彻底讲透彻)

摘要: Claude Skills是Anthropic推出的智能体框架,通过连接外部工具和服务扩展Claude AI的功能,支持实时交互与任务执行。其核心架构包含技能路由器、注册表、执行引擎等模块,采用渐进式披露机制优化上下文管理。与MCP和A2A相比,Skills更注重模块化设计与Claude深度集成,通过SKILL.md文件定义可重复工作流程,兼具高效性和灵活性。开发者可创建自定义技能,遵循聚焦用户价值、安全隐私等最佳实践,实现AI能力的场景化拓展。该框架与MCP、A2A形成互补,共同推动智能体生态发展

全网120W+关注AI拉呱,专注人工智能以及科技前沿! 2138

计算机控制技术及应用

《计算机控制技术及应用》通过总结作者的科研成果和吸收国内外的先进理论、方法和技术,以计算机控制系统的网络化、开放化、智能化和集成化发展趋势为主线索,主要介绍计算机控制系统的基本概念和计算机控制系统的典型形式,计算机控制系统的数学描述与基本分析方法,以及数字PID控制器、最少拍控制系统、达林算法、状态变量设计法等设计方法及其各种改进算法。重点突出计算机控制系统输入输出通道接口的设计方法和典型控制系统的设计案例与实现方法等。

华为云centos7.9按装ambari 2.7.5 hostname 踩坑记录

Centos 7.9 下Ambari2.75安装及HDP3.1.5集群搭建 linux hostname 获取失败案例分享。云上机器 hosts配置hostname走回环 ambari socket.getfqdn() 获取 localhost.localdomain 问题排查。以及 领先云 嗯 解决问题的方式

SoberChina的博客 1831

文档:亲测可用解决vnc灰屏,黑屏,鼠标大黑叉情况

主要解决vnc-viewer灰屏,黑屏,鼠标大黑叉等现象,详细见文档。

Centos7 安装 ambari 2.6.2.2 和HDP 2.6.5 的艰苦历程

Centos7 安装 ambari 2.6.2.2 和HDP 2.6.5 的艰苦历程 安装前的准备 VM虚拟机三台(切记别吝啬,硬盘大点,不然安装的时候突然机器写满,centos连机都开不开) HDP地址: http://public-repo-1.hortonworks.com/HDP/centos7/2.x/updates/2.6.5.0/HDP-2.6.5.0-centos7-rpm.t...

黑羽柚咲 824

IEM模型,地表粗糙度模拟

利用微波反演土壤水分时候,利用IEM模型可以实现对随机地表的模拟

android 蓝牙通讯demo

android 下蓝牙通讯demo,实现了发现蓝牙,使能蓝牙,通过蓝牙发送消息。

Ambari【部署 01】最新版本ambari-2.7.7下载编译打包安装使用(踩坑实录)

最新版本Ambari2.7.7从下载编译到放弃(编译坑太多及仅能管理CDH版本是原因)

Java与大数据相关实践内容分享! 5238

Apache Ambari 2.7.4 + HDP3.1.4 安装

Apache Ambari 2.7.4 + HDP3.1.4 安装版本信息机器配置一、在三台服务器分别修改hosts二、在三台服务器分别修改hostname(需要重启才能生效)三、配置免密四、安装JDK五、HDP下载地址六、安装依赖七、关闭防火墙八、关闭SELinux九、同步时间十、解压安装包到/var/www/html目录下,准备制作本地源十一、开启httpd服务十二、制作本地源十三、检查站点是否做好十四、安装mysql十五、下载mysql驱动包十六、配置本地源repo十七、在hadoop33节点安装am

ly_5683的博客 1729

ambari2.7.3+hdp3.1.1环境搭建记录及遇到的问题

前段时间在公司服务器上重新搭了一套ambari2.6+hdp2.7的环境,遇到的问题还不是很多,还算比较顺利。现在想再搭建一套ambari2.7.3+hdp3.1.1的环境在自己的机器上来玩一玩,虽然去年也勉勉强强的已经搭建好了一个,但是问题也比较多,并且部分组件使用不了,虚拟机运行起来也完全跑不动,所以现在再多开3台虚拟机,总共6台来重新搭建。

哈哈哈哈哈哈哈 2238

centos7 + ambari2.7.4.0

centos7 + ambari 机器准备 192.168.0.100 master 192.168.0.101 slave 192.168.0.102 slave 安装包准备 ######1、设置静态IP vi /etc/sysconfig/network-scripts/ifcfg-enp33 (ifcfg-enp33根据自己机器文件而定) 原有配置修改 BOOTPROTO=static ONBOOT=yes 新增配置 IPADDR=192.168.0.100 #静态IP N

u013205984的博客 2512

ambari 2.7.4搭建过程

1、系统环境 搭建过程主要参考:https://blog.csdn.net/tang86100/article/details/108732111 系统:Centos7.8 配置:4台虚拟机,8核,32G,2T硬盘 备注:在搭建ambari2.7.4之前,尝试搭建ambari2.5.0,但是失败告终,找遍了所有方法都不行,个人感觉有可能centos版本太高,所以换了ambari2.7.4 集群规划 hadoop01 主节点 hadoop02 从节点 hadoop03 从节点 hado.

chefjuicy的博客 866

Ambari2.5+HDP2.6集群配置安装

有道有笔记地址: http://note.youdao.com/noteshare?id=4a8bb0f1a02e3b9605824bc6ce3a1c9e 一、官方链接 Ambari 版本:ambari-2.5.0.3-centos7 http://ambari.apache.org/ HDP 版本:HDP-2.6.0.3-centos7-rpm HDP-U

Super涌 3341

Apache Spark 学习笔记 (3) 安装Ambari

本文记录了在代理环境下如何在CentOS 7上安装Ambari Server

犀利“博” 4446

Centos安装Ambari流程(含出错集合)

1.安装JDK yum install java-1.8.0-openjdk java检查 java -version 配置变量 vi /etc/profile export JAVA_HOME=/usr/java/jdk1.8.0_262(根据自己上面检查的版本) export PATH=$JAVA_HOME/bin:$PATH export CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar 执行生效 source

daisy.skye的博客 669
上一篇: centos7 u盘安装遇到的坑以及靠谱解决方法。
下一篇: 解决centos 7 minimal配置下ifconfig无效的问题
UnknownBody
博客等级 码龄16年 5601粉丝 4754原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

UnknownBody

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值