- 博客(10)
- 收藏
- 关注
原创 Flink CDC:让数据同步变得实时又优雅
负责从数据库读取变更(如 mysql-cdc、postgres-cdc、oracle-cdc)将数据输出到下游(如 Kafka、ES、Hudi、Iceberg、Doris)如果能做到数据库一有变化,下游系统几秒内就能拿到变更,那很多事情会简单得多。报表可以实时刷新,告警可以及时触发,甚至安全事件的分析都能在分钟级完成。它的核心思想其实很朴素:不再周期性扫全表,而是实时监听数据库的日志变化。这样我们就能把数据库的变化变成一个无界的数据流,进一步实时写入。):然后开始监听数据库日志,持续捕获后续的变更事件。
2025-11-09 19:02:14
1254
原创 安装azkaban3.56.0踩过的坑
安装步骤,此处只写编译完之后的步骤: (1)azkaban编译后目录 *solo-server $AZKABAN_HOME/azkaban-solo-server/build/distributions/azkaban-solo-server0.1.0-SNAPSHOT.tar.gz *web-server $AZKABAN_HOME/azkaban-web-server/build/d...
2019-04-11 11:54:01
555
原创 linux系统下普通用户操作root权限下的压缩包
xxx is not in the sudoers file.This incident will be reported.的解决方法 第一步:su root 切换到root用户下 第二步:添加sudo文件的写权限 chmod /etc/sudoers 第三步: 编辑sudoers vi /etc/sudoers 找到这行 root ALL=(ALL) ALL,...
2019-04-01 11:29:01
2130
原创 spark程序将结果写入虚拟机mysql中拒绝连接问题
程序在idea中写完打成jar上传到linux环境中 运行命令: spark-submit --master spark://hdp01:7077 --jars /root/mysql-connector-java-5.1.39.jar --class day05.IpTest4 Spark38-1.0-SNAPSHOT.jar hdfs://hdp01:9000/ip/ipaccess...
2018-12-22 11:30:49
797
原创 CentOs下卸载mysql
1.关闭mysql服务 2.检查安装的Mysql组件 rpm -qa | grep -i mysql 3.whereis mysql查询mysql所在的文件夹,最好find一下,将所有的都删除 find / -name mysql 4.将查到的所有关于MySQL的东西,全部rm -rf 5.确认一下是否删除干净 rpm -qa | grep -i mysql 至此,卸载...
2018-11-22 12:36:30
304
1
原创 CentOs下重新安装mysql遇到的问题
出现 MySQL Daemon failed to start 运行以下命令: rm -fr /var/lib/mysql/* killall mysqld 再启动service mysqld start 成功,至此,问题解决!注意:卸载一定要卸载干净 ...
2018-11-22 12:31:31
245
转载 Linux centos 6 中安装 MySQL 8.0 以及设置远程访问
之前在Windows中使用的MySQL是8.0版本的,后来想在Linux中也想安装一个,查了很多相关资料都没法成功,后来在鹏鹏的指点下成功完成了,来记录下。 1:删除Linux中可能残留的mysql [root@master ~]# rpm -e --nodeps mysql 2:安装mysql [root@master ~]# yum install -y mysql-server mysq...
2018-11-20 22:18:30
260
原创 整合Spring+Mybatis+Springmvc常见问题
整合ssm实现简单的增删改查。。。 整合ssm一般不笼统的将三个框架一块整合,首先将Spring+mybatis整合。 第一步:新建maven项目,导入jar包依赖 第二步:需要pojo实体类,dao层接口,dao层映射文件,控制层,业务层,以及业务层的实现类 资源文件,需要有mybatisConfig.xml、applicationContext-mybatis.xml,appl...
2018-09-23 22:58:47
436
原创 关于集合
一、为什么会出现集合类 1.集合是一个容器,为了方便的对多个对象进行操作。 2.集合容器同数组容器的不同:数组长度固定,集合长度可变;数组可以存储基本数据类型,而集合只能存储引用数据类型;但是集合可以存储不同类型的对象。 二、Collection Collection 表示一组对象,这些对象也称为 collection 的元素。一些...
2018-08-14 11:11:31
438
原创 初识Spring+AspectJ+spring之事务管理
一、初识Spring 1.Spring是分层的JavaSE/EE full-stack(一站式) 轻量级开源框架 EE的三层结构:web层、业务层、数据访问层(持久层,集成层) 2.Spring的核心:IOC(控制反转)、AOP(面向切面编程) 3.学习Spring需要的入门准备(①下载Spring开发包②创建web工程引入相应的jar包③创建Spring配置文件④在配置中配置类...
2018-05-13 12:09:21
746
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人
RSS订阅