第一片心意-优快云博客

HDFS 为我们提供了垃圾箱的功能，也就是说当我们执行 hadoop fs -rmr xxx命令之后，文件并不是马上被删除，而是会被移动到，等到一定的时间后才会执行真正的删除操作。从上面的例子中可以看出，在我们删了 test.txt 文件之后，文件被移到路径下，如果这个操作属于误操作，我们则可以到回收站找回这个文件并直接mv回原来的目录，即可恢复之前的数据。不过使用这个功能的前提是我们配置了 fs.trash.interval参数，默认是 0，代表不启用垃圾箱功能。</</</</

2023-06-30 16:23:58 2165

原创 hive表小文件合并java程序

合并hive表小文件

2023-06-30 13:23:55 977

原创海豚调度器3.1.x集群部署

海豚调度器3.1.x的安装步骤，从上到下直接参考即可，无需多次跳转，比较清晰。

2023-06-27 16:12:02 2746

原创 CDH集群离线部署-6.3.1

CDH6.3.2 安装文档。

2023-06-21 16:43:24 1624

原创 superset2.x开启匿名分享

superset2.x开启匿名分享

2023-06-20 12:03:09 897

原创海豚调度器完全设置东八区

海豚调度器完全设置东八区

2023-05-24 19:12:59 3010 9

原创程序监控报警失败自动重启脚本

运行在服务器上的一些组件服务，比如大数据的 hadoop、hive、hbase，或者是自己写的一些需要长时间运行的程序，我们启动了之后，是不会经常去观察这些程序的运行状态的。正常情况下这是没问题的，但有时候，程序在运行过程中，会由于机器的负载，或者是其他的一些环境不稳定因素，到会程序停止运行。如果我们没有设计什么监控的话，只能在出现问题时，登录机器查看组件或程序运行的情况，这是非常被动的，如果影响到业务，会更严重，所以我们需要增加一些组件或程序运行的监控、报警和失败重启脚本。

2023-03-31 20:51:59 571

原创 flink sql 无表查询示例

flink sql 无表查询语句示例

2023-03-31 16:23:59 281

原创 flink部署-1.16

本文为 flink 1.16 官网中部署相关部分的内容翻译整理。

2023-03-31 14:33:26 1839

原创海豚调度器自身资源消耗控制

海豚调度器自身占用过多资源原因分析及参数调整。

2023-03-26 11:52:39 1693 1

原创 flink部署-1.15

本文为 flink 官网中对于部署部分的翻译整理，比较全面。

2023-03-19 17:18:00 1417

原创 spark消费kafka多主题并注册为表进行sql处理

spark消费kafka多主题并注册为表进行sql处理

2023-03-05 21:18:56 495

原创 CDH-6.3.2内置spark-2.4.0的BUG

CDH-6.3.2内置spark-2.4.0的BUG

2023-03-05 21:08:18 1895

原创 kafka生产者事务踩坑记录

spark消费kafka，程序一直卡主不运行，也不报错，最后发现和kafka上游生产者开启了事务有关。

2023-02-18 21:15:12 1751

原创 flink部署-1.14

本博客为 flink 1.14 官网中对 flink 部署部分的内容翻译整理。

2022-12-10 18:12:04 2545

原创 flink部署-1.13

本博客为 flink 1.13 官网中 flink 部署部分内容的翻译整理。

2022-12-04 19:12:16 2284

原创 flink状态与容错-1.13

本文为 flink 1.13 官网中对于状态与容错部分的翻译整理。

2022-12-03 11:50:11 3605

原创 flink程序执行管理-1.13

本博客为 flink 1.13 官网中程序执行管理部分的翻译整理。

2022-11-29 09:51:43 1274

原创 flink数据类型和序列化-1.13

本博客是对 flink 1.13 官网中数据类型和序列化部分的翻译整理。

2022-11-28 14:09:16 2034

原创 flink-sql查询配置与性能优化参数详解-1.16

本博客为 flink 1.16 官网中性能优化和表配置内容的翻译整理。

2022-11-18 11:18:35 1909

原创 flink-sql查询配置与性能优化参数详解-1.15

本博客为 flink 1.15 版本中 flink sql 的优化和配置不分的内容翻译整理

2022-11-17 16:24:47 1622

原创 flink-sql查询配置与性能优化参数详解-1.14

本博客为 flink 1.14 版本中 flink sql 配置和性能优化的相关内容翻译整理。

2022-11-17 11:32:20 1520

原创 flink-sql所有语法详解-1.16

本博客为对 flink 1.16 版本中 flink sql 语法部分内容的翻译整理。

2022-11-13 15:31:42 1877 1

原创 flink-sql所有语法详解-1.15

本文为 flink 1.15 官网中 flink sql 语法部分的内容翻译整理。

2022-11-12 18:06:49 2149

原创 flink-sql所有语法详解-1.14

本文为 flink 1.14 官网中 flink sql 部分内容的翻译整理。

2022-11-12 12:46:32 2461

原创 flink-sql读写hive-1.16

本文为 flink 1.16 官网中读写 hive 部分的翻译整理。

2022-11-06 15:18:26 3076

原创 flink-sql读写hive-1.15

本文为 Flink 1.15 官网中读写 hive 内容的翻译整理。

2022-11-06 14:47:53 1559 2

原创 flink-sql读写hive-1.14

本文是对 flink 1.14 官网中读写 hive 部分内容的翻译整理。

2022-11-06 14:15:57 3177

原创 flink-sql所有数据类型-1.16

本文基于 flink 官网中 flink sql 数据类型进行翻译整理。

2022-11-05 18:28:33 1113

原创 flink-sql所有数据类型-1.15

本文是对 flink 1.15 官网中 flink sql 数据类型部分的翻译整理。

2022-11-05 18:07:18 4227

原创 flink-sql所有数据类型-1.14

本文基于 flink 1.14 官网中的 flink sql 数据类型部分进行翻译整理。

2022-11-05 18:00:00 1542

grafana-服务器节点监控总览.json

grafana上服务器节点监控总览使用的json文件

2023-05-24

grafana-MySQL 基础库实例总览.json

grafana上MySQL 基础库实例总览使用的json文件

2023-05-24

grafana-kafka 总览.json

grafana上kafka 总览使用的json文件

2023-05-24

grafana-kafka 测试消费者组消费情况.json

grafana上kafka 测试消费者组消费情况使用的json文件

2023-05-24

grafana-Flink 任务监控.json

grafana上Flink 任务监控使用的json文件，基于flink-1.15.x版本

2023-05-24

grafana-DolphinScheduler-Worker.json

grafana上DolphinScheduler-Worker使用的json文件

2023-05-24

grafana-DolphinScheduler-Master.json

grafana上DolphinScheduler-Master使用的json文件

2023-05-24

grafana-DolphinScheduler-JVM.json

grafana上DolphinScheduler-JVM使用的json文件

2023-05-24

grafana-DolphinScheduler-数据源（基础数据库）.json

grafana上DolphinScheduler-数据源（基础数据库）所使用的json文件。

2023-05-24

grafana-DolphinScheduler-告警.json

grafana上DolphinScheduler-告警使用的json文件

2023-05-24

grafana-服务器节点负载.json

grafana服务器节点负载监控图所使用到的json文件。

2023-05-24

Spark2中使用累加器、注意点以及实现自定义累加器.docx

累加器（accumulator）是Spark中提供的一种分布式的变量机制，其原理类似于mapreduce，即分布式的改变，然后聚合这些改变。累加器的一个常见用途是在调试时对作业执行过程中的事件进行计数。

2019-08-21

IntelliJIDEA的安装、配置与使用.docx

该文档是IDEA软件的使用说明，从安装、配置到使用都有说明。配套视频资源网址： https://www.bilibili.com/video/av30080993

2019-08-12

scrt_sfx-x64.8.5.4.1942.exe

官网下载的securecrt。这是一款非常好用的远程连接linxu的工具。

2019-08-03

Webyog_Sqlyog_Ultimate_13.1.1

Webyog_Sqlyog_Ultimate_13.1.1正式版，压缩包内含有注册码信息，安装完之后可直接注册。 SQLyog 是一个快速而简洁的图形化管理MYSQL数据库的工具，它能够在任何地点有效地管理你的数据库，由业界著名的Webyog公司出品。使用SQLyog可以快速直观地让您从世界的任何角落通过网络来维护远端的MySQL数据库。

2019-04-30

securecrt 8.5.3 64位官方安装包

此文件为最新版： securecrt 8.5.3 64位官方安装包。官网下载需要登录账户，大家可以自行注册。

2019-02-28

modbus4j 相关jar包 3.0.5-SNAPSHOT.jar

将该压缩包解压，其中的9个文件就和maven仓库中某个依赖的9个文件类型完全一致，然后将其放到自己maven的本地仓库中，具体路径如下：“maven本地仓库位置\com\infiniteautomation\modbus4j”，然后在自己的maven项目中引入该依赖，具体代码如下： com.infiniteautomation modbus4j 3.0.4

2018-12-24

modbus4j 相关jar包 3.0.4

将该压缩包直接解压就能看到和maven上完全一样类型的jar包结构，只需要将压缩包中的9个文件放到下面的路径：“你电脑上maven本地仓库位置\com\infiniteautomation\modbus4j”，然后在你项目的pom文件中添加该jar包依赖即可。代码如下： com.infiniteautomation modbus4j 3.0.4

2018-12-24

securecrt 32位官方安装包

SecureCRT是一款支持SSH（SSH1和SSH2）的终端仿真程序，简单地说是Windows下登录UNIX或Linux服务器主机的软件。 SecureCRT支持SSH，同时支持Telnet和rlogin协议。SecureCRT是一款用于连接运行包括Windows、UNIX和VMS的理想工具。通过使用内含的VCP命令行程序可以进行加密文件的传输。有流行CRTTelnet客户机的所有特点,包括:自动注册、对不同主机保持不同的特性、打印功能、颜色设置、可变屏幕尺寸、用户定义的键位图和优良的VT100,VT102,VT220和ANSI竞争.能从命令行中运行或从浏览器中运行.其它特点包括文本手稿、易于使用的工具条、用户的键位图编辑器、可定制的ANSI颜色等.SecureCRT的SSH协议支持DES,3DES和RC4密码和密码与RSA鉴别。

2018-08-27

securecrt 64位官方安装包

securecrt 64位官方安装包 SecureCRT是一款支持SSH（SSH1和SSH2）的终端仿真程序，简单地说是Windows下登录UNIX或Linux服务器主机的软件。 SecureCRT支持SSH，同时支持Telnet和rlogin协议。SecureCRT是一款用于连接运行包括Windows、UNIX和VMS的理想工具。通过使用内含的VCP命令行程序可以进行加密文件的传输。有流行CRTTelnet客户机的所有特点,包括:自动注册、对不同主机保持不同的特性、打印功能、颜色设置、可变屏幕尺寸、用户定义的键位图和优良的VT100,VT102,VT220和ANSI竞争.能从命令行中运行或从浏览器中运行.其它特点包括文本手稿、易于使用的工具条、用户的键位图编辑器、可定制的ANSI颜色等.SecureCRT的SSH协议支持DES,3DES和RC4密码和密码与RSA鉴别。

2018-08-27

TA关注的人

grafana-服务器节点监控总览.json

grafana-MySQL 基础库实例总览.json

grafana-kafka 总览.json

grafana-kafka 测试消费者组消费情况.json

grafana-Flink 任务监控.json

grafana-DolphinScheduler-Worker.json

grafana-DolphinScheduler-Master.json

grafana-DolphinScheduler-JVM.json

grafana-DolphinScheduler-数据源（基础数据库）.json

grafana-DolphinScheduler-告警.json

grafana-服务器节点负载.json

Spark2中使用累加器、注意点以及实现自定义累加器.docx

IntelliJIDEA的安装、配置与使用.docx

scrt_sfx-x64.8.5.4.1942.exe

Webyog_Sqlyog_Ultimate_13.1.1

securecrt 8.5.3 64位官方安装包

modbus4j 相关jar包 3.0.5-SNAPSHOT.jar

modbus4j 相关jar包 3.0.4

securecrt 32位官方安装包

securecrt 64位官方安装包

CDH 的 HUE 界面表加载列出错。

flink sql on hive 批处理

CDH6.3.1 CDH6.3.2安装

windows和linux互相ping的问题

slf4j logback日志输出至不同的文件中，日志文件名在程序中动态指定

CDH中HUE的账号权限问题