- 博客(12)
- 资源 (7)
- 收藏
- 关注
RSS订阅
原创 私有CA搭建并将HTTPS应用于Tomcat、Springboot
目录1 CA概念2 HTTPS过程3 环境说明4 搭建私有CA4.1 环境准备4.2 搭建CA中心4.3 操作错误从新来过5 浏览器证书配置6 创建服务器证书6.1 环境准备6.2 创建服务器证书6.2 配置证书7 将CA证书导入JDK8 创建Tomcat服务器证书9 Tomcat的HTTPS配置9.1 单向认证9.2 双向认证...
2019-12-17 17:21:43
6004
2
原创 Kafka 4.0 SCRAM认证 集群搭建
在test01上配置/opt/program/kafkab/bin/kafka-server-start-scram.sh。在test02上配置/opt/program/kafkab/bin/kafka-server-start-scram.sh。在test03上配置/opt/program/kafkab/bin/kafka-server-start-scram.sh。在test01上配置/opt/program/kafkab/config/server-scram.properties。
2025-03-25 11:31:28
971
5
原创 dolphinscheduler docker部署 在worker节点中部署python
4 配置worker，会在后台以sudo -u dolphinscheduler -i a.sh方式运行，所以必须是/etc/profile中配置。当然如果能熟练使用docker容器，可以将这些步骤直接编写成一个容器，然后重新部署worker容器。3 配置python环境变量，在/etc/profile中配置，一定是这个文件中。1 配置租户，这一步在服务器上操作，后面的操作都是在docker容器中。我这里使用的不是基础环境，conda创建环境脚本，参考。2 安装python环境，参考。
2024-09-13 17:37:34
644
1
原创 大数据实时同步，保证数据100%不丢失
重复b、c、d、e的过程，直至正常，也可以这是一个阈值，到了多少个快照后，不在重复以上操作，然后记录下需要补数的数据。b补数完了，再次快照V2包含N2条数据，N2<N1则说明有数据被修改，否则是正常的。d补数完了，再次快照V3包含N3条数据，N3<N2则说明有数据被修改，否则是正常的。解决方案：以实时同步为主，离线同步为辅，在实时同步失败时，用离线同步的方式补齐。5 更新操作在补数时，可能会出现被修改的情况，使用快照版本的方式，进行解决。c对N1-N2的数据进行补数。e对N2-N3的数据进行补数。
2023-10-20 08:58:59
301
原创 Doris中如何保证数据的幂等性
2 sequence 列，可以保证数据在写入时根据某一个字段进行排序，一般情况下是时间字段，例如update_time，数据在被写入时，大的update_time会覆盖update_time小的记录，这样就能保证数据是最新的。1 Unique 模型，可以保证数据在写入时，同一条数据只会保存一条。当同一条数据被写入多次时，doris会显示最近写入的那条数据。3 doris routine load与kafka结合使用，实时数据写入，同时也能保证容错性。在doris中有两个特性，可以保证数据的幂等性。
2023-06-13 15:19:50
449
原创 DataX Mysql8兼容问题
1 问题描述 问题描述可以去看https://github.com/alibaba/DataX/issues/146 主要报错java.sql.SQLException: The connection property 'zeroDateTimeBehavior' acceptable values are: 'CONVERT_TO_NULL', 'EXCEPTION' or 'ROUND'. The value 'convertToNull' is not acc...
2021-07-29 16:22:28
1080
原创 spark streaming程序中代码在驱动器（driver）执行还在在执行器（executor）中执行的问题
word count的例子import kafka.serializer.StringDecoder;import org.apache.spark.SparkConf;import org.apache.spark.api.java.JavaPairRDD;import org.apache.spark.api.java.JavaSparkContext;import org.apache.spark.api.java.function.VoidFunction;import org.a
2020-05-14 16:56:48
754
原创 Spring Cloud 明文密码加密解密
1 背景，加密方式，可以直接跳转到https://segmentfault.com/a/11900000123638412 使用场景 Spring Cloud Config 的解决方案，建议只是在配置中心使用，并且也只有注册中心和配置中心中涉及到到的敏感信息加密使用该方式。因为配置中心在进行动态刷新时，会先用注册中心DOWN，然后再UP。在这个过程中会读取相关信息，使用该方式加密会更...
2019-08-14 10:40:01
1421
原创 微服务-分布式事务-TX-LCN的Eureka版本实例
1 版本信息spring-boot-starter-parent ： 2.1.4.RELEASEspring-cloud-dependencies：Greenwich.SR1txlcn:5.0.2.RELEAS2 环境2.1 host设置############## eureka 127.0.0.1 my-peer1 127.0.0.1 my-peer2...
2019-07-10 11:47:17
701
私有CA搭建并应用于Tomcat、Springboot.docx
2019-12-17
txlcn-demo.rar
2019-07-10
spring-boot-master.rar
2019-05-20
Hadoop生态圈搭建
2016-10-09
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人