- 博客(20)
- 收藏
- 关注
RSS订阅原创 彻底关闭Win10自动更新（Win10企业版或专业版）
彻底关闭Win10自动更新（Win10企业版或专业版）关闭Windows Updata服务右键此电脑->管理->服务和应用程序->服务Windows Update-> 常规->启动类型->禁用 恢复->第一次失败->无操作 常规->如果服务状态正在运行->点击停止关闭Windows更新计划任务任务计划程序->任务计划程序库->Microsoft->Windows->WindowsUpdate->Sch
2022-04-20 20:01:05
2264
原创 Hbase高可用集群部署
Zookeeper 集群的正常部署并启动Hadoop 集群的正常部署并启动配置环境变量vi /etc/profile# Hbase-HAexport HBASE_HOME=/home/xyp9x/hbase-2.0.5-HAexport PATH=$PATH:$HBASE_HOME/binsource /etc/profilehbase-env.sh 修改内容vi hbase-env.shexport JAVA_HOME=/home/xyp9x/jdk1.8.0_..
2021-12-09 23:16:06
234
原创 Hbase集群部署
Zookeeper 集群的正常部署并启动Hadoop 集群的正常部署并启动配置环境变量vi /etc/profileexport HBASE_HOME=/home/xyp9x/hbase-2.0.5export PATH=$PATH:$HBASE_HOME/binsource /etc/profilehbase-env.sh 修改内容vi hbase-env.shexport JAVA_HOME=/home/xyp9x/jdk1.8.0_144export HBA..
2021-12-09 23:14:46
1829
原创 Kafka运维总结
ERROR Fatal error during KafkaServer startup.Configured zookeeper.connect may be wrong检查一下kafka配置文件 config/server.propertieszookeeper.connect=bigdata111:2181, bigdata112:2181, bigdata113:2181去zookeeper中进入zk的客户端中查看kafka的节点ls /brokers/ids如果此时kafka没起来
2021-12-09 23:12:25
2720
原创 Mysql运维
[ERROR] Unix socket lock file is empty /tmp/mysql.sock.lock[ERROR] Unable to setup unix socket lock file.进入/tmp/查看mysql.sock.lock，文件大小为0，直接删除该文件rm -rf mysql.sock.lock再启动mysql：service mysqld start。即可启动成功Your password does not satisfy the current policy
2021-12-09 23:09:06
388
原创 Mysql配置文件的含义
[mysqld]#Mysql服务的唯一编号，每个mysql服务Id需唯一server-id=1#MySQL安装根目录basedir=/usr/local/mysql/#MySQL数据文件所在位置datadir=/usr/local/mysql/data#用于本地连接的socket套接字，mysqld守护进程生成了这个文件socket=/tmp/mysql.sock#客户端设置，即客户端默认的连接参数user=mysqlsymbolic-links=0#默认连接端口，默认是3
2021-12-09 23:08:10
295
原创 Mysql常用命令
备份数据库//-p 后面不能加password，只能单独输入数据库名称//mysqldump不是mysql客户端的命令//在dump导出时，添加--set-gtid-purged=off参数，避免将gtid信息导出1.导出某个数据库的所有表结构（此时要加-d）mysqldump --set-gtid-purged=off -h localhost -u ai_iot -p -d ai_iot --skip-lock-tables > ai_iot_2021-11-15.sql2.导出某个数
2021-12-09 22:41:00
138
原创 Centos7通过rpm包安装Mysql5.7
卸载系统自带的mariadb和mysql-libs（首次安装）//删除mariadbrpm -e --nodeps `rpm -qa|grep mariadb`//再次查询是否已删除rpm -qa | grep mariadb//删除rpm -e --nodeps `rpm -qa|grep mysql-libs`//再次查询是否已删除rpm -qa | grep mysql-libsSELINUX（首次安装）vi /etc/selinux/configSELINUX=disable
2021-12-09 11:30:12
700
原创 Linux解压Jar包指定路径离线安装Mysql5.7
卸载系统自带的Mariadb（首次安装）//删除rpm -e `rpm -qa|grep mariadb` --nodeps//再次查询是否已删除rpm -qa | grep mariadbSELINUX（首次安装）vi /etc/selinux/configSELINUX=disabled创建mysql用户和mysql用户组（首次安装）/etc/group是用户组文件。数据表示为：组名：口令：组标识号：组内成员列表/etc/passwd是用户文件。数据表示为：用户名：口令 ：用户标
2021-12-01 18:06:53
324
原创 Linux解压Jar包离线安装Mysql5.7
卸载系统自带的Mariadb（首次安装）//删除rpm -e `rpm -qa|grep mariadb` --nodeps//再次查询是否已删除rpm -qa | grep mariadbSELINUX（首次安装）vi /etc/selinux/configSELINUX=disabled创建mysql用户和mysql用户组（首次安装）/etc/group是用户组文件。数据表示为：组名：口令：组标识号：组内成员列表/etc/passwd是用户文件。数据表示为：用户名：口令 ：用户标
2021-12-01 18:04:44
1547
原创 openssh升级
openssh（Centos）一、升级说明1、升级OpenSSH后，原有公钥失效，信任关系需要重新配置2、升级过程需要停止sshd服务，会导致ssh和sftp无法使用3、升级需要关闭防火墙服务4、升级需要关闭selinux服务5、升级前需要开启telnet，防止升级失败，系统无法登录，对应的防火墙需要开启23端口，安装需要telnet相关依赖包6、升级过程中需要刷新lib库：ldconfig -v7、升级顺序：顺序是zlib库-> openssl -> openssh8、升级需
2021-11-05 17:03:44
2328
原创 Kafka SASL/SCRAM动态认证集群部署
Kafka SASL/SCRAM动态认证集群部署目的：配置SASL/PLAIN验证，实现了对Kafka的权限控制。但SASL/PLAIN验证有一个问题：只能在JAAS文件KafkaServer中配置用户，一旦Kafka启动，无法动态新增用户。SASL/SCRAM验证可以动态新增用户并分配权限1. 服务端配置1、解压安装包tar -zxvf kafka_2.11-2.4.1.tgz -C /home/xyp9x/2、改名mv kafka_2.11-2.4.1 kafka_scram3、在ka
2021-09-22 15:03:07
1349
原创 服务器之间挂载共享磁盘目录
两台服务器需要共享文件夹share服务端：192.168.1.111客户端：192.168.1.112需要的安装包链接：https://pan.baidu.com/s/1YZlt4Ub_4muYQ0HTuFvJtg提取码：333q服务端环境搭建（root用户执行）1、nfs安装//安装nfsrpm -ivh *.rpm --force --nodeps//创建共享文件夹mkdir -p /home/xyp9x/share2、nfs启动systemctl enable rpcbi
2021-09-17 10:44:07
1815
原创 Flink高可用HA集群部署
部署前提：已安装jdk，hadoop，zookeeper先确定flink的版本和hadoop的版本是否可以兼容节点分配bigdata111bigdata112bigdata113JobManager√√TaskManager√√√ZooKeeper√√√修改配置文件1）mastersbigdata111:8081bigdata112:80812）slavesbigdata111bigdata112bigdata1133）f
2021-09-16 23:17:45
369
原创 Flink集群部署
一、架构说明(standalone模式)standalone是Flink自带的一个分布式集群，它不依赖其他的资源调度框架、不依赖yarn等。Spark也有一个自带的分布式资源调度模型，也叫作standalonestandalone模式进程名介绍：JobManager------->进程名字：StandaloneSessionClusterEntrypoint 我们又叫它：MasterTaskManager----->进程名字：TaskManagerRunner 我们又叫它：
2021-09-16 23:15:14
505
原创 Hadoop完全分布式集群部署
1）集群部署规划bigdata111bigdata112bigdata113HDFSNameNode、SecondaryNameNode、DataNodeDataNodeDataNodeYARNResourceManager、NodeManagerNodeManagerNodeManager2）创建data、logsmkdir data logs3）配置core-site.xmlvi core-site.xml添加以下内容：<!--指定H
2021-09-16 23:11:06
243
原创 Ntp时间同步
虚机有三台：bigdata111、bigdata112、bigdata113，需将112和113的linux时间向111同步1）所有机器root用户安装ntp服务命令#server安装rpm -ivh ntp-4.2.6p5-29.el7.centos.2.x86_64.rpm#slave安装rpm -ivh ntpdate-4.2.6p5-29.el7.centos.2.x86_64.rpm2）111主服务器切root修改ntp配置文件(根据服务器ip设置)vi /etc/ntp.conf
2021-09-16 22:57:12
511
原创 Kafka集群部署
kafka集群部署1）解压安装包tar -zxvf kafka_2.11-2.4.1.tgz -C /home/xyp9x/2）在kafka目录下创建logs、kafka-logs文件夹mkdir logs kafka-logs3）修改配置文件vi server.properties将原内容全部清空，输入以下内容：#broker的全局唯一编号，不能重复broker.id=0#是否允许删除topicdelete.topic.enable=true#处理网络请求的线程数量num.
2021-09-16 22:50:21
109
原创 Kafka SASL/PLAIN静态认证集群部署
Kafka SASL集群部署在Kafka中，SASL机制包含三种，它们分别是Kerberos、PLAIN、SCRAM。以PLAIN认证为示例1.配置Server1）解压安装包tar -zxvf kafka_2.11-2.4.1.tgz -C /home/xyp9x/2）改名mv kafka_2.11-2.4.1 kafka_sasl2）在kafka目录下创建logs、kafka-logs文件夹mkdir logs kafka-logs3）config目录中创建kafka_server
2021-09-16 19:14:00
1446
原创 Linux的Centos7搭建步骤
Linux的Centos7搭建步骤新建虚拟机选择“自定义(高级)”，并点击【下一步】选择虚拟机硬件兼容性Workstation 15.x, 并点击【下一步】选择“稍后安装操作系统”，并点击【下一步】选择Linux操作系统，版本CentOS 7 64位，并点击【下一步】命名虚拟机，路径自定义设置，并点击【下一步】配置处理器为1，并点击【下一步】设置虚拟机内存大小，普通为4G，cdh为8G并点击【下一步】选择“使用网络地址转换(NAT)”，并点击【下一步】选择“LSI Logic”，并点击
2021-04-14 13:07:11
259
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人