leejunokokok-优快云博客

原创 clickhouse安装（单机）

1、安装CPU必须支持SSE 4.2指令集grep -q sse4_2 /proc/cpuinfo && echo “SSE 4.2 supported” || echo “SSE 4.2 not supported”主机名设置hostnamectl set-hostname XXX每台主机增加hosts解析vi /etc/hosts[IP] [hostname]CentOS7 打开文件数限制在 /etc/security/limits.conf 这个文件

2021-06-17 16:55:29 220 1

原创 ntp时间同步

#关闭chronyd时间服务systemctl stop chronyd.servicesystemctl disable chronyd.service#调整系统时区为亚洲上海【shanghai】timedatectl set-timezone Asia/Shanghai#安装ntp服务, 并调整本地时间yum -y install ntpsed -i 's/centos.pool.ntp.org/cn.pool.ntp.org/g' /etc/ntp.conf..

2021-06-15 10:14:30 179

原创 ansible的安装及使用

1、ansible的安装及使用1）介绍ansible 是一款强大的配置管理工具，目的是帮助系统管理员高效率的管理成百上千台主机ansible Ad-hoc 模式：一次执行一条命名，批量执行在远程主机上(暂时只使用这个)ansible playbook 模式：一次执行多条命令，不同的主机执行不同的命令，更加灵活。2）安装yum install epel-release -yyum repolistyum install ansible -y3）配置文件介绍Ans

2021-06-10 14:46:01 420

原创 centos7 SSH免密

假定操作的机器为10.225.25.1,需要免密登录的机器为10.225.25.2在10.225.25.1上做如下操作1.生成密钥ssh-keygen -t rsacat /root/.ssh/id_rsa.pub > /root/.ssh/authorized_keys2.赋予权限chmod 700 /root/.ssh/chmod 600 /root/.ssh/authorized_keys3.10.225.25.2机器上赋予权限mkdir /root/.ssh

2021-06-10 12:51:27 139

原创 clickhouse日志级别

clickhouse默认为TRACE级别的日志<level>trace</level>clickhouse定义了7个级别的log（除去OFF，可以说分为6个级别），优先级从高到低依次为：OFF、FATAL、ERROR、WARN、INFO、DEBUG、TRACE。TRACE 很低的日志级别，输出大量日志，不建议使用。DEBUG 指出细粒度信息事件对调试应用程序是非常有帮助的，主要用于开发过程中打印一些运行信息。INFO 消息在粗粒度级别上突出强调应用程序的运行过程.

2021-06-03 09:29:29 3187 3

原创 clickhouse集群搭建（3分片2副本）

集群名称分片副本 IP地址端口用户 cluster_3shards_2replicas 1 1 10.1.48.12 9000 default cluster_3shards_2replicas 1 ...

2021-05-31 12:37:17 4544

原创 Clickhouse集群部署（3分片1副本）

1、集群节点信息10.1.48.22 slaver2210.1.48.23 slaver2310.1.48.24 slaver242、安装zookeeper2.1.下载apache-zookeeper-3.7.0-bin.tar.gz安装包放置到上面三台服务器/home目录下https://mirrors.tuna.tsinghua.edu.cn/apache/zookeeper/zookeeper-3.7.0/apache-zookeeper-3.7.0-bin.tar.g

2021-05-27 13:30:33 1708

原创同步mysql表中全量数据到DorisDB

目录①安装Datax②安装DorisWriter 插件③DorisDB创建表④创建作业的配置文件（json格式）①安装Datax参考https://github.com/alibaba/DataX/blob/master/userGuid.md参考https://github.com/alibaba/DataX②安装DorisWriter 插件tar zxvf datax%2Fdoriswriter.tar.gzmv doriswriter/ datax/plu.

2021-05-26 13:21:36 2113

原创 DorisDB单机环境搭建

目录①JDK②GCC③部署FE④部署BE⑤部署Broker参考：http://doc.dorisdb.com/①JDK1.去镜像网站下载jdkhttps://repo.huaweicloud.com/java/jdk/12.0.1+12/jdk-12.0.1_linux-x64_bin.tar.gz2. 解压tar -zxvf jdk-12.0.1_linux-x64_bin.tar.gz -C /usr/local/3.配置JAVA_HOME：vi /e

2021-05-26 13:04:03 2410

原创 mongodb集群之Replica Set模式

目录① Replica Set原理② 搭建③ 添加删除节点① Replica Set原理Mongodb的Replica Set即副本集方式主要有两个目的，一个是数据冗余做故障恢复使用，当发生硬件故障或者其它原因造成的宕机时，可以使用副本进行恢复。另一个是做读写分离，读的请求分流到副本上，减轻主（Primary）的读压力。Replica Set是mongod的实例集合，它们有着同样的数据内容。包含三类角色：（1）主节点（Primary）接收所有的写请求，然后把修改同步到所.

2021-05-24 15:21:49 418 1

原创 mongodb集群之sharding模式

① sharding原理构建一个MongoDB的分片集群，需要三个重要的组件：分片服务器（Shard Server）、配置服务器(Config Server)、路由服务器（Route Server）:mongos(路由服务器)，数据库集群请求的入口，所有请求都通过mongos进行协调，不需要在应用程序添加一个路由选择器，mongos自己就是一个请求分发中心，它负责把对应的数据请求转发到对应的shard服务器上。Route Server本身不保存数据，启动时从Config Server加载集.

2021-05-24 15:18:10 316 3

原创 MySQL参数max_connect_errors分析

查询错误日志，频繁报Got an error reading communication packets查找问题：①查询max_allowed_packet包的大小mysql> show variables like '%max_allowed_packet%';+--------------------------+------------+| Variable_name | Value |+--------------------------+------------+| ma

2021-04-26 14:58:15 795

原创 MySQL参数max_connections分析

max_connections是指整个mysql服务器的最大连接数；max_user_connections是指每个数据库用户的最大连接数，比如：虚拟主机可以用这个参数控制每个虚拟主机用户的数据库最大连接数；（历史最大连接数）例如GRANTUSAGEON*.*TO'batchjob1'@'localhost'WITHMAX_USER_CONNECTIONS10;mysql> show variables like 'max_connections%';+-----...

2021-04-26 14:52:14 3863

原创 ERROR 1226 (42000): User ‘root‘ has exceeded the ‘max_connections_per_hour‘ resource (current value:

问题：使用mysql -uroot -p连接mysql时报ERROR 1226 (42000): User 'root' has exceeded the 'max_connections_per_hour' resource (current value: 2)错误分析：在my.cnf配置文件中新增配置项skip_name_resolve = ON解决办法：注释掉#skip_name_resolve = ON...

2021-04-18 08:57:22 3210

原创第1回之kafka初识

1、主要概念和术语一个事件记录了一个事实，即世界或您的企业中发生了“某些事情”。在文档中也称为记录或消息。当您向Kafka读取或写入数据时，您将以事件的形式进行操作。从概念上讲，事件具有键，值，时间戳和可选的元数据标题。这是一个示例事件：事件键：“爱丽丝” 赛事价值：“向Bob支付了$ 200” 活动时间戳记：“ 2020年6月25日，下午2:06”生产者是那些向Kafka发布（写入）事件的客户端应用程序，而消费者是那些订阅（读取和处理）这些事件的客户端应用程序。在Kafka中，生产者和消费者

2021-04-11 13:04:24 91

原创 centos7静默安装oracle 11g

目录1.安装依赖包2.关闭selinux3.修改用户的限制文件4.修改内核参数5.添加用户和组6.新建安装目录7.修改Oracle用户的.bash_profile文件8.拷贝Oracle安装文件到指定目录9.修改db_install.rsp10.开始静默安装11.运行监听文件12.创建数据库13.创建一个用户14.常用命令15.常见错误

2021-03-22 16:58:23 218

原创 sqlserver临时表

参考：https://blog.youkuaiyun.com/csdnsunyf/article/details/102670914SQL Serverzh支持3种临时表: 本地临时表、全局临时表和表变量，在某些情况下，你可能会发现临时表比使用永久表更方便。本地临时表的名称前面有一个编号符 (#table_name)，而全局临时表的名称前面有两个编号符 (##table_name)。本地临时表可以通过将数字符号作为命名前缀来创建一个本地临时表，如 #T1。3种类型的临时表都在 tempdb数据库.

2021-02-18 17:07:59 315

原创 Oracle表空间管理

1、创建用户和表空间sqlplus /nolog; --启动sqlplus不登录connect sys/root as sysdba --通过sys登录select instance_name from v$instance; --查看数据库实例create tablespace table_space datafile ‘E:\table_space.dbf’ size 100M; --创建表空间create user test identified by ‘123456’ defa

2021-02-10 17:22:02 148 1

原创 python文件组织

shutil模块shutil.copyfileobj(src,dst,length = 10) 将src文件里的内容copy到dst里，length是每次读的字节数。shutil.copy(source,destination) 复制文件。该函数将返回一个字符串，该字符串表示复制后的文件路径shutil.copytree(source,destination) 复制文件夹shutil.rmtree(目录) 删除目录及下面的文件shutil.move(source,destination)

2021-02-06 20:15:48 175

原创在安装了python2的前提下安装配置python3的流程

1、安装时勾选Install for all users，并配置python安装路径2、添加python3环境变量（python3的安装路径）3、修改python3路径下的python->python3以下操作均在cmd上执行：4、测试是否okpython3安装正常会弹出：5、安装pip：python3 -m pip install --upgrade pip -i https://pypi.douban.com/simple --user出现Su.

2021-02-06 09:46:51 221

原创 SQLServer主从同步配置（Log Shipping方式）

SQLServer主从同步配置（Log Shipping方式）目录SQLServer主从同步配置（Log Shipping方式）1、创建SQL Server数据库的管理员用户和共享文件夹权限，设置SQL Server服务和SQL Server代理的登录用户为sqladmin1.1分别在主从服务器上创建管理员用户。1.2分别在主从数据库服务器上创建用于存放主从备份日志文件的共享文件夹SQLDataBack且共享权限和NTFS权限1.3 分别在主数据库服务器上和从数据库服务器上打开SQL

2021-02-04 14:00:53 1002 1

原创 linix下cut 截取命令

cut 截取命令-f 参数,指定列-d 参数指定列和列之间的分隔符,默认的分隔符是\t(行向制表符)cut -f 1 1.txt #取1.txt文件中的第1列内容(列分隔符默认为\t)cut -f 2 1.txt #取1.txt文件中的第2列内容cut -f 1 -d ‘,’ 3.txt #取3.txt文件中的第1列(列分隔符为,)cut -f 2 -d ‘,’ 3.txt #取3.txt第2列...

2021-02-02 00:38:28 127

原创 Sql Server 日志

Sql Server 日志和代理错误日一般在实例重新启动后自己主动切换,假设实例久未重新启动,将可能积累太多的日志,不方便查看.查看错误日志大小：--查看日志大小EXEC xp_enumerrorlogs --sqlserver错误日志EXEC xp_enumerrorlogs 1 --sqlserver错误日志EXEC xp_enumerrorlogs 2 --代理日志日志切换：创建一个新的日志文件，并将最老的日志删除-- "Sql Server 日...

2021-01-25 10:36:41 343

原创 sqlserver修改数据库、物理文件及逻辑名称

修改数据库名称、物理文件名和逻辑名称修改数据库名称test => DTG_Local_test修改逻辑名称test=> DTG_Local_testtest_log => DTG_Local_test_log修改物理文件名test.mdf => DTG_Local_test.mdftest_log.mdf => DTG_Local_test_log.mdf具体脚本如下：–改数据库名EXEC sys.sp_renamedb @dbname = ‘test’,

2021-01-05 07:17:05 1600