- 博客(20)
- 收藏
- 关注
原创 centos7 vsftpd 进阶配置(主动模式配置+限定用户访问范围)
配置好ftp之后,我们还要限定用户可以查看的范围的时候,应该如何配置
2023-08-18 16:34:50
414
1
原创 CDH时钟偏差:无法找到主机的 NTP 服务,或该服务未响应时钟偏差请求。
1、单节点主机重启后,NTP服务正常,cdh界面就是报ntp服务异常2、单独重启NTP服务的时候。
2023-05-29 13:47:53
1203
原创 python3 解决UnicodeDecodeError: ‘utf-8‘ codec can‘t decode byte 0xcc in position 1448:
摘要:当我们写python3的代码里面出现中文注释的时候,会出现编码错误的提示
2023-05-24 14:58:09
768
原创 hive亿级别的数据比较 distinct、 group by、 row_number() 去重效率
随着互联网的发展,产生的数据量越来越大,重复的数据也会越来越多,选择合适的去重方式是我们所需要的;这里对比了1亿1千万的数据来进行测试,重复数量为1千万条,重复比约等于1比10;
2022-11-08 14:44:54
3823
原创 python实现解析json告警邮件转换成文本,并转发告警邮件
平台自带的告警平台发送的邮件,往往不能够分得清我们所需要的告警内容,需要人为的解析区分出来。
2022-11-04 15:24:00
433
原创 CenterOS最小化安装后安装的常用工具
当最小安装系统的时候,我们经常要使用的工具都需要安装,我在这里整理了一些常用的工具:wget,vim,yum源,ifconfig,zip、unzip,rz和sz,Tree,telnet
2022-10-28 10:45:09
864
原创 cdh断电后故障解决 -- process information unavailable
机房断电,服务器意外关机,-- process information unavailable
2022-10-20 11:24:56
258
原创 ERROR 1045 (28000): Access denied for user ‘root‘@‘localhost‘ (using password: YES)已解决
MySQL有时候登录正确的密码后还是报下面这个错误(rpm 安装的MySQL 5.7)
2022-10-18 17:39:21
1213
原创 Error: Could not open client transport with JDBC Uri: jdbc:hive2://解决连接beenline连接HiveServer2报错
beenline 连接hiveserver2 报错背景:ranger 整合cdh后。
2022-10-14 13:42:57
6435
原创 不良 : 群集中有 1,814 个 副本不足的块 块。群集中共有 1,816 个块。百分比 副本不足的块: 99.89%。 临界阈值:40.00%。
The health test result for HDFS_UNDER_REPLICATED_BLOCKS has become bad: 1,814 under replicated blocks in the cluster. 1,816 total blocks in the cluster. Percentage under replicated blocks: 99.89%. Critical threshold: 40.00%.(不良 : 群集中有 1,814 个 副本不足的块 块。群集中共
2022-10-14 11:12:55
1443
原创 如何查看spark任务总共有多少个job
当我们看spark任务执行进度的时候,往往判断job总数,来判断spark代码执行到了哪里,所以如何查看job总数是我们要计算出来的
2022-09-21 11:04:17
1292
cdh6.3.2编译的ranger版本
2023-08-03
CDH6.3.2集成flink1.13 parcel 包
2022-10-25
BCompare 专业高效的文件夹对比工具
2022-10-12
linux mysql5.7.0 rpm 安装包
2022-10-12
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人