
大数据运维
大数据运维
心灵Haven
心若有所栖,何似风飘渺。
展开
-
9_Spark安装
下载spark压缩包通过百度网盘分享的文件:spark-2.0.2-bin-hadoop2.6.tgz链接:https://pan.baidu.com/s/1lXPExVxxdkdx1QjiLlaorw提取码:yc69通过百度网盘分享的文件:scala-2.11.8.tgz链接:https://pan.baidu.com/s/1YR4enZqTgE-Yy3Jb456JIQ提取码:yc69。原创 2025-03-06 19:56:55 · 458 阅读 · 0 评论 -
8_安装Thrift
下载thrift通过网盘分享的文件:thrift-0.9.3.tar.gz链接: https://pan.baidu.com/s/1dQ3QJu5N2exSKtHlSS7aWQ 提取码: tc4c解压thrift到src文件夹下。原创 2025-02-26 14:34:12 · 174 阅读 · 0 评论 -
3_Hadoop集群的格式化、启动、关闭和状态
4、检查集群是否正常:(主节点执行):hadoop dfsadmin -report。格式化hadoop集群:hadoop namenode -format。2、启动集群:sbin/start-all.sh。6、关闭集群:sbin/stop-all.sh。1、在哪个节点格式化,哪个节点就是主节点。3、检查集群是否正常:jps。原创 2025-02-24 17:20:04 · 222 阅读 · 0 评论 -
2_修改hostname和互信
把公钥给authorized_keys,记录所有节点的公钥,以达到免密登录(互信)分发authorized_keys公钥文件到其他节点中,使免密登录(互信)生效。1.克隆master虚拟机出slave1和slave2两台虚拟机。2.开机slave1和slave2。原创 2025-02-24 17:07:55 · 261 阅读 · 0 评论 -
1_安装JDK和Hadoop
链接:https://pan.baidu.com/s/1VjhdpfyqdC7ivEBIjTn8tA。通过百度网盘分享的文件:jdk-8u172-linux-x64.tar.gz。在Hadoop解压文件夹内。原创 2025-02-24 16:06:00 · 489 阅读 · 0 评论 -
0_关闭防火墙、设置静态IP
【代码】0_关闭防火墙、设置静态IP。原创 2025-02-23 21:38:21 · 150 阅读 · 0 评论 -
7_HBase安装
下载hbase通过网盘分享的文件:hbase-1.3.6-bin.tar.gz链接: https://pan.baidu.com/s/1_5YCy5pmE85x-eIY2Liz8A 提取码: vtcu解压到master节点上。原创 2025-02-23 00:14:25 · 242 阅读 · 0 评论 -
6_zookeeper集群配置
注意server.x的x对应为服务器节点myid的值。原创 2025-02-20 22:49:05 · 168 阅读 · 0 评论 -
hadoop集群没有datanode异常
【代码】hadoop集群没有datanode异常。原创 2025-02-15 22:23:23 · 358 阅读 · 0 评论 -
5_Hive之[Hive]详细安装步骤
master节点。原创 2025-02-10 21:16:00 · 441 阅读 · 0 评论 -
4_Hive之最新方式MySQL5.7 安装
再去执行 取消 / 设置默认 mysql 安装的命令。关闭强密码验证:(如果不设置简单密码,忽略此步骤)第二种方式删除删除 MySQL 及其依赖的包。方法 1:在虚拟机中通过 wget 方式下载。如果已经安装,卸载掉原 mysql。取消默认安装 mysql8.0。设置默认安装 mysql5.7。在文件的后面添加以下内容。原创 2025-02-10 20:32:24 · 625 阅读 · 0 评论