- 博客(10)
- 收藏
- 关注
RSS订阅原创 编写脚本下载SFTP服务器上的日志
Bash脚本下载SFTP服务器上的日志- 检查本地是否已经有了日志文件，避免重复下载- 检查点文件记录已经下载的文件，以避免重复下载- 下载SFTP服务器上的日志文件到本地文件夹中- 等待一段时间再次检查和下载新文件
2023-03-21 10:45:51
1282
原创 Centos单机部署Elasticsearch、JDK、Zookeeper、Kafka、Neo4j、Redis、MySQL、MinIO、Flink、Vector
或者，您也可以跳过 auto 参数，改为通过 interactive 参数手动定义密码。请记录这些密码，我们很快就会再次用到这些密码。~/soar/soar-persistent：soar-persistent项目。~/soar：存放所有Spring Boot项目和Flink Job项目。~/soar/soar-admin：soar-admin项目。~/software：存放所有第三放软件。修改ES_JAVA_HOME环境变量。每个进程最大同时打开文件数太小，修改。移动到~/software目录。
2022-08-13 15:19:42
1398
1
原创 JAVA、Linux部署运维常用命令
tcpdump -i enp6s0f0 host 183.224.8.165 and port 514 -w systest.cap 接收和发送。tcpdump -i enp6s0f0 dst host 183.224.8.165 and port 514 -w systest.cap 发送。出现Active: active (running)切高亮显示则表示是启动状态。-i 网卡 目的IP +端口 -w保存文件 **.cap。#查询所有开放的端口。...
2022-08-13 14:34:20
1476
3
转载 Redis 如何保证数据库和缓存双写一致性？
前言数据库和缓存（比如：redis）双写数据一致性问题，是一个跟开发语言无关的公共问题。尤其在高并发的场景下，这个问题变得更加严重。我很负责的告诉大家，该问题无论在面试，还是工作中遇到的概率非常大，所以非常有必要跟大家一起探讨一下。今天这篇文章我会从浅入深，跟大家一起聊聊，数据库和缓存双写数据一致性问题常见的解决方案，这些方案中可能存在的坑，以及最优方案是什么。1. 常见方案通常情况下，我们使用缓存的主要目的是为了提升查询的性能。大多数情况下，我们是这样使用缓存的：用户请求过.
2022-04-07 10:28:51
5900
12
原创 尚硅谷Flink入门到实战-学习笔记
尚硅谷Flink入门到实战-学习笔记尚硅谷2021最新Java版Flink下面笔记来源（尚硅谷公开资料、网络博客、个人小结）中间会把自己认为较重要的点做做标记（下划线、加粗等）1. Flink的特点事件驱动（Event-driven）基于流处理一切皆由流组成，离线数据是有界的流；实时数据是一个没有界限的流。（有界流、无界流）分层API越顶层越抽象，表达含义越简明，使用越方便越底层越具体，表达能力越丰富，使用越灵活1.1 Flink vs Spark Stream
2021-12-08 16:53:19
2645
1
原创 二级MySQL，未来教育MySQL题库，15套试卷，sql题答案。
未来教育MySQL题库，15套试卷，sql题答案。一、1.insert into tb_dept values('D4','公关部','Liming','010-82953306');2.alter table tb_employee alter column salary set default 3500;3.select count(*) as '总人数' from tb_employee where depton=(select depton from tb_dept where dna
2021-12-02 12:13:38
3239
1
原创 Java面试，从基础到框架，从变量到内存
本文是阅读八股文后，再加上个人面试不下十家公司经历挑出来的一部分高频面试题。文章目录new关键字创建一个对象，说说对象的创建流程？字符型常量和字符串常量的区别?continue、break、和 return 的区别是什么？==和 equals 的区别hashCode()与 equals()Java 中的几种基本数据类型是什么？对应的包装类型是什么？各自占用多少字节呢？在一个静态方法内调用一个非静态成员为什么是非法的?重载和重写的区别重载重写一个类的构造方法的作用是什么? 若一个类没有声明构造方法，该程序
2021-11-26 11:22:19
3126
1
原创 $CONDITIONS的作用
$CONDITIONS的作用 如果你想通过并行方式导入结果，每个map task都会执行sql的副本，结果会根据sqoop 推测的边界进行分区。query必须包含$CONDITIONS，这样每个sqoop程序都会被替换成一个独立的条件。同时你必须指定 --split -by 分区。 当执行MapReduce 时首先会执行多个 Map，这些 Map 会在数据库中搜索数据，即每个Map 都 会获取一部分数据，此时要将数据库中的数据导入到HDFS，如果使用CONDITIONS参数，就能保证数据库中数
2021-07-07 20:55:38
1494
原创 requests模块
requests模块知识点：掌握 headers参数的使用掌握 发送带参数的请求掌握 headers中携带cookie掌握 cookies参数的使用掌握 cookieJar的转换方法掌握 超时参数timeout的使用掌握 代理ip参数proxies的使用掌握 使用verify参数忽略CA证书掌握 requests模块发送post请求掌握 利用requests.session进行状态保持1. requests模块介绍requests文档http://docs.python-r
2021-05-06 10:55:01
219
原创 flume配置负载均衡、故障转移
flume配置负载均衡、故障转移文章目录flume配置负载均衡、故障转移1.flume负载均衡2. flume故障转移1.flume负载均衡第一台机器配置#负载均衡#配置Agent a1的组件a1.sources=r1a1.channels=c1a1.sinks=s1 s2#配置a1的sourcea1.sources.r1.type=netcata1.sources.r1.bind=0.0.0.0a1.sources.r1.port=3333##配置a1的channela1
2021-04-16 10:53:12
454
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人