weixin_45525313的博客

原创 1.2.1 WSL为Centos7配置静态IP

使用CMD控制台，创建新网络防火墙规则，允许网络通行。

原创 1.2 WSL中安装Centos7

检查触发器：确保任务的触发器设置正确。直接把所在的目录打包到新的电脑，解压tar压缩包。直接双击Centos7.exe进行安装，选择使用原有数据盘即可。修改主机的host映射文件C:\Windows\System32\drivers\etc\hosts。2.输入shell:startup，添加文件 wsl-d.vbs，输入以下内容。选择Centos7进行下载，下载完解压到指定目录（安装位置），双击安装即可。4.执行完，还需要回到目录，删除除了这个repo文件的其他文件。输入密码 -> ********

原创 1.1.2 配置静态IP和远程SSH登录

修改配置文件，使用命令：vi /etc/sysconfig/network-scripts/ifcfg-ens33。查看配置文件，已经默认开放ssh服务端口了，ssh默认为22端口，所以不需要改动文件。解决ping不通外网问题 添加DNS1\DNS2。

原创 1.1.1 VMnet8网络配置

VMnet8 网络配置是 VMware 虚拟机中用于 NAT 模式的网络设置，通过这种方式，虚拟机可以与宿主机和外部网络进行通信。步骤二：配置网关IP，前三位网络码需和子网IP一致；一般192.168.26.1为主机IP，网关一般为192.168.26.2。步骤一：选择VMnet8设置子网IP段，格式为：xxx.xxx.xxx.0即可，点击NAT进行网络配置。步骤三：确认配置网关，点击确定后，再次点击应用即可关闭。

原创 1.1 VMware中安装Centos7

将虚拟机镜像文件（ CentOS-7-x86_64-Minimal-2009.iso）导入到虚拟机软件 VMware中，并进行相关配置以使其能够在虚拟机环境中正常运行。这一步骤完成后，就可以在虚拟机中启动操作系统，进而进行各种软件安装、开发测试、系统学习等操作，为后续的虚拟机使用打下坚实基础。CentOS 7-x86_64-Minimal-2009.iso是精简版，自带的软件最少，适合自定义安装。备注：旧版的win10中的Hyper-V和VM的不兼容，只能WSL2和VM选其中一个。

原创 Centos集群同步文件脚本xsync

第一次使用需要安装rsync。

原创 Hive4.0.1集群安装部署（Hadoop版本为3.3.6）(详细教程)

hive本身没有直接关停服务的命令，可以通过端口进程的方式进行关闭。两个RunJar分别为metastore、hiveserver2的进程，可以通过“kill -9 进程号”进行关停。配置完metastore-site.xml，需要先初始化hive元数据库，选择在一台节点初始化即可。在hadoop安装目录下的core-site.xml中，需要开启hadoop代理用户配置。进入Hive的配置目录： cd /opt/apps/hive/conf/hive4.0已经弃用默认的Hive Cli。

原创 Docker简易安装部署

【代码】2025Docker镜像源配置。

原创 Linux环境Zookeeper集群安装（详细教程）

Linux环境Zookeeper集群安装（详细教程）

原创 Hadoop HA高可用集群3.3.6搭建（详细教程）

前置环境（1）下载：https://archive.apache.org/dist/hadoop/common/hadoop-3.3.6/hadoop-3.3.6.tar.gz（2）安装ZK https://www.yuque.com/mylucky-8msta/pbmy30/mhin20xtk00plzg0?singleDoc# 《集群安装》（3）确保SSH互通。

原创 MySQL8.0.40离线安装（详细教程）

-datadir=/opt/apps/mysql/data/：指定 MySQL 的数据存储目录。这会在指定的数据目录中创建 MySQL 系统表和其他必要的系统文件，此外还会生成一个随机的 root 初始密码。--basedir=/opt/apps/mysql：指定 MySQL 的安装根目录。通常位于 MySQL 安装目录中的 bin 子目录下，比如 /opt/apps/mysql/bin/mysqld。--user=mysql：指定以 mysql 用户的身份运行 MySQL 服务器。

原创 Centos集群免密登录脚本xssh

Centos集群免密登录脚本xssh;花费了几天升级的版本，希望各位能点个赞，鼓励一下

原创 Centos集群同步文件脚本xsync

Centos集群同步文件脚本xsync

原创 VMware安装Centos7（详细图文教程）

使用WSL2：bcdedit /set hypervisorlaunchtype auto。通过网盘分享的文件：CentOS-7-x86_64-Minimal-2009.iso。备注：旧版的win10中的Hyper-V和VM的不兼容，只能WSL2和VM选其中一个。使用VM：bcdedit /set hypervisorlaunchtype off。

原创 JAVA修改Jar包class文件重新打包实战（工作应用实测）

【代码】修改Jar包内代码。

原创 数据同步工具SeaTunnel安装部署（详细教程）

配置JAVA_HOME，jdk8+

原创 Centos离线rpm安装

直接使用浏览器Ctrl + F 进行搜索相关包即可。

原创 Centos配置ntp时间同步

将fudge 192.168.26.21 stratum 10 改成 Fudge 192.168.26.21 stratum 10。29,59 * * * * /usr/sbin/ntpdate bigdata01 # 每小时的第29分和59分同步一次时间。到达时间点后通过date命令查看时间是否已经同步，当然配置间隔时间更短的任务，这样可以更快的看到效果。将内存中的系统时间写入到硬件时钟中，确保即使在系统关闭后，硬件时钟也能保持正确的时间。设置的）同步到硬件时钟。这个参数的作用是将系统时间（由。

原创 Nginx配置HTTPS转发(使用本地Docker的IP)

【代码】Nginx配置HTTPS转发(使用本地Docker的IP)

原创 Nginx配置HTTP转发

waiting — 开启 keep-alive 的情况下,这个值等于 active – (reading+writing), 意思就是 Nginx 已经处理完正在等候下一次请求指令的驻留连接.server accepts handled requests — 总共处理了11989个连接 , 成功创建11989次握手, 总共处理了11991个请求。writing — 响应数据到客户端的数量。reading — 读取客户端的连接数.nginx status参数详解。注意使用方法：curl。

原创 Nginx配置MySQL转发

【代码】Nginx配置MySQL转发。

原创 Nginx安装配置

【代码】Nginx安装配置。

原创 Maven安装配置（含配置文件）

【代码】Maven安装配置。

原创 Hive介绍

1.什么是Hive hive:由Facebook开源用于解决海量结构化日志的数据统计工具。 hive 是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张表，并提供类SQL查询功能 本质是将HQL转化成MapReduce程序特点：（1）Hive处理的数据存储在HDFS （2）Hive分析数据的底层实现是MapReduce （3）执行程序运行在Yarn上Hive的...

原创 Hadoop介绍

1.hadoop的特点（优势-4高）： （1）高可用性：Hadoop底层维护多个数据副本，所以即使Hadoop某个计算元素或者存储出现故障，也不会导致数据的丢失 （2）高扩展性：在集群分配任务数据，可方便的扩展数以千记得节点 （3）高效性：在MapReduce的思想下，Hadoop是并行工作的，以加快任务处理速度。 （4）高容错性：能够自动将失败的任务重新分配...

原创 Hive的调优策略

1.Featch抓取，某些情况可以不用MapReduce计算2.开启Hive的本地模式，小数据在本地处理即可3.开启Hive的并行执行4.Hive的严格模式 （1）分区表，只用where过滤分区字段 （2）order by，必须使用limit （3）限制笛卡尔积的查询5.JVM的重用，同一个job重新使用N次6.开启Hive的推测执行7.数据压缩（gzip，lzo，snappy，bzip2）8.表的优化 （1...

原创 Hadoop的组成-1.x和2.x的区别

原创 HDFS分布式文件系统组件及读写操作

1.HDFS的写操作2.HDFS的读操作3.HDFS的组件（文件切成块）1.Namenode:存储文件元数据，与客户端交互2.Datanode:在本地系统存储文件块数据，以及块数据的校验和3.SecondaryNameNode:每一段时间对Namenode元数据备份...