- 博客(8)
- 收藏
- 关注
RSS订阅原创 canal-admin模式下，canal切换MySQL主备节点异常
canal主备切换配置首先根据https://github.com/alibaba/canal/wiki/AdminGuide中的文档，配置好主备节点的相关信息。以下配置摘选自官方文档：# position infocanal.instance.master.address = 10.20.144.25:3306canal.instance.master.journal.name = ...
2020-04-28 22:33:16
1483
原创 canal写kafka，zookeeper中cursor更新异常
一.相关组件canal 1.1.4mysql 5.7.19zookeeper 3.4.5kafka 2.9.2-0.8.1.1二.canal的关键配置# 在server层直接写kafka需要配置这个canal.serverMode = kafka# 高可用server需要使用default-instance.xml配置canal.instance.global.spring....
2020-04-27 15:32:48
923
4
原创 greenplum6.0权限
一.gp用户权限级别gp用户的权限级别有以下5类。仅自己基础基础操作员操作员管理员（超级用户）其中有超级用户的具有全部的权限，不需要进行任何的授权操作。默认的超级用户为gpadmin。可创建多个超级用户。其他一般的用户，建外部表、创建角色、登陆权限、使用pxf等的权限，都需要进行授权才可以使用，可以在创建角色时指定权限，也可后期进行添加。role,user基本是一样的,只是默...
2019-12-05 16:49:28
1572
原创 pxf的hadoop\hive环境配置问题汇总
pxf版本5.21参考文档 https://gpdb.docs.pivotal.io/5210/pxf/install_java.html部署流程按照jdk https://gpdb.docs.pivotal.io/5210/pxf/install_java.html初始化pxf https://gpdb.docs.pivotal.io/5210/pxf/init_pxf.html...
2019-08-20 08:08:10
1296
原创 storm 拓扑worker time-out重启问题排查
storm版本：0.9.0.1 异常描述：拓扑运行一段时间后、个别机器的worker进程会出现time-out重启的情况，而该worker进程重启后，并不能正常工作、在spout不断出现fail、原因不明。将拓扑kill掉、重启该拓扑，则可以正常运转。观察到出现worker time-out重启的情况，通常都出现在cpu load出现一个小峰值的时间点、如下图所示。 且worker重启...
2018-09-09 22:19:00
1554
原创 storm的supervisor节点启动失败 Error when processing an event
机器重启后，重启storm的supervisor程序报以下错误： 解决方式：删除storm.yaml配置文件中的storm.local.dir参数配置的目录下的Supervisor和workers两个目录，然后重新启动。在其中一台机器按以上方式解决后，发现另外一台机器又报了相似的错误，一致启动失败，错误如下: 从错误日志了可以看出，是由于存在workers目录存在导致的，目录下放的...
2018-08-01 23:24:56
833
原创 php模拟登陆360网站 爬取360指数
爬取360指数三部曲获取360用户的token通过账号、密码、token模拟登陆，获取cookie设置cookie,爬取360指数代码实现<?phpclass CrawlerOf360Data{ private $curl; function __construct() { $this->init_curl_...
2018-04-18 23:49:44
1521
1
原创 kafka命令基本用法
kafka 命令基本用法（0.8.1.x版本）脚本列表启动kafka的Server节点 使用bin/kafka-server-start.sh config/server.properties新建的topic bin/kafka-topics.sh –create –zookeeper localhost:2181 –replication-factor 1 –par
2018-01-28 23:27:43
314
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人