
liunx
文章平均质量分 50
ReadMeFrist
这个作者很懒,什么都没留下…
展开
-
Data_web(九)mongodb增量同步到mongodb
query筛选基本和mongodb的find方法类似原创 2022-07-30 16:23:19 · 1015 阅读 · 0 评论 -
Data_web失败任务通过zabbix监控报警(七)
前言: datax_web的数据库job_info表中last_handle_code字段200代表为上次执行成功,500表示上次执行未成功。1、 通过写一个python脚本去取值即可#!/usr/bin/python3# czhimport pymysql# 打开数据库连接db = pymysql.connect(host='数据库地址', user='user', password='pwd',原创 2022-04-07 14:29:36 · 1907 阅读 · 0 评论 -
datax实现mysql增量同步到clickhouse
默认编辑的datax是不支持clickhouse的,1.下载ithub上第三方的代码源https://github.com/zhangchangwei/DataXgit clone https://github.com/zhangchangwei/DataX.git2、下载DataX源码:$ cd {DataX_source_code_home}$ mvn -U clean package assembly:assembly -Dmaven.test.skip=true3.可能会编译报原创 2022-03-31 18:22:31 · 3063 阅读 · 0 评论 -
Data_web实现SqlServer增量同步到mysql(五)
datax原创 2022-02-23 15:53:46 · 735 阅读 · 1 评论 -
datax_web实现mysql增量同步(四)
datax mysql原创 2022-02-20 22:21:16 · 3416 阅读 · 2 评论 -
DataX_Web安装(三)
datax web原创 2022-02-20 21:00:06 · 1397 阅读 · 0 评论 -
DataX全量和增量mysqltomysql(二)
datax 增量原创 2022-02-20 18:56:05 · 1519 阅读 · 0 评论 -
centos7数据集成工具datax-安装(一)
datax原创 2022-02-19 21:16:04 · 2239 阅读 · 0 评论 -
elasticsearch报错 all shards failed修复
启动后查看日志报错all shards failed1.查看健康状态[root@iZbp1bzugfiorbfrhd333aZ ~]# curl -XGET 'http://172.16.163.226:9200/_cluster/health?pretty=true'{ "cluster_name" : "es-1", "status" : "yellow", ####未修复前为red "timed_out" : false, "number_of_nodes" : 1,原创 2022-01-06 18:14:20 · 8891 阅读 · 1 评论 -
Zabbix监控Nginx全部后端服端口健康度
思路1.通过Nginx.conf的里面upstream模块里面的server去取出全部后端服务ip和端口2.生成zabbix可识别的json文件3.zabbix利用摸版自动发现去实现全部ip端口的添加脚本#!/usr/bin/python3# chenzhenhua#########解析配置文件dir = "/usr/local/tengine/conf/nginx.conf" ###修改自己的文件目录ipport_list= {}#f_log = open("ip","a")w原创 2021-10-28 15:04:46 · 354 阅读 · 0 评论 -
XFS(dm-0): Internal error XFS_WANT_CORRUPTED_GOTO at line 报错
这里是引用https://blog.youkuaiyun.com/jycjyc/article/details/107700404转载 2021-10-09 14:21:16 · 1406 阅读 · 0 评论 -
saltstack实现对多Nginx配置同步和重启
简介Saltstack是基于python开发的一套C/S架构配置管理工具使用SSL证书签方的方式进行认证管理底层使用ZeroMQ消息队列pub/sub方式通信号称世界上最快的消息队列ZeroMQ能快速在成千上万台主机上进行各种操作采用RSA Key方式确认身工作机制Master和Minion都以守护进程的方式运行Master监听配置文件里定义的ret_port(接收minion请求),和publish_port(发布消息)的端口当Minion运行时,它会自动连接到配置文件里定义的Maste原创 2021-07-30 16:40:44 · 411 阅读 · 0 评论 -
centos8 chrony时间服务器
安装服务yum install chrony -ysystemctl enable chronyd ###设置开机默认启动修改配置[root@ntpout ~]# vi /etc/chrony.conf# Use public servers from the pool.ntp.org project.# Please consider joining the pool (http://www.pool.ntp.org/join.html).#pool 2.centos.pool.ntp原创 2021-07-29 14:03:32 · 323 阅读 · 0 评论 -
nginx + keepalive高可用案列
准备服务器slave172.16.3.89服务器matser172.16.3.90两台服务器安装Nginx,并且启动(此步骤省略)安装配置1.安装服务yum install-y keepalived 2.修改配置文件(主机)[root@qfc-ntp keepalived]# vi /etc/keepalived/keepalived.conf#ConfigurationFile for keepalivedglobal_defs {#script_user原创 2021-07-28 15:11:14 · 153 阅读 · 0 评论