- 博客(7)
- 资源 (4)
- 收藏
- 关注
RSS订阅原创 提交Yarn任务Can‘t create directory
main : run as user is hdfs main : requested yarn user is hdfs Can't create directory /data1/yarn/nm/usercache/hdfs/appcache/application_xxx- Permission denied Can't create directory /data2/yarn/nm/usercache/hdfs/appcache/application_xxx- Permissi..
2022-02-25 11:05:39
2159
原创 CDH下No jar path specified for org.apache.phoenix.coprocessor.ScanRegionObserver导致Hbase出现RIT异常
描述： Hbase有配HA，在运行了一段时间之后Master会自动挂掉，CM报Master有以下问题 之后通过CM跳转到Hbase的Web UI界面发现如下： 有一个Regions server报错，此Regions server是最近新增加的新节点，老节点正常 解决方法： 1.到对应Regions server上查看出问题时间点的日志，发现报以下问题 Failed to load coprocessor org.apache.phoenix.coprocessor.ScanReg.
2020-09-28 16:56:06
725
1
原创 Hue 添加LDAP用户时报Could not get LDAP details for users in pattern xxx
最近在用HUE添加用户的时候报了一个错误，无法创建用户（刚接手的工作）。 Could not get LDAP details for users in pattern xxx. 意思是说无法从LDAP模式中获取用户xxx的信息。 LDAP是个啥子？它是做统一账户管理的，详细信息大家可以百度。 说正事，既然没有这个新用户的信息，那就到对应的ldap服务器上添加对应的用户和组信息就可以了。 登录LDAP服务器，跳转到*/usercentry目录 执行命令：bashusercentry xx.
2020-08-28 10:56:41
1052
原创 解决关于Kerberos的Failed to find any Kerberos tgt问题
错误描述 Secure Client Cannot Connect ([Caused by GSSException: No valid credentials provided(Mechanism level: Failed to find any Kerberos tgt)]) 解决方法： 1、一种是由于kerberos的keytab权限问题导致，一般用kinit -kt /var/lib/hadoop-hdfs/hdfs.keytab hdfs/admin 类似的命令可以解决。 2..
2020-07-23 14:50:53
15136
原创 linux环境下修改文件或目录的所属用户和所属组
1、修改文件所属用户 #将文件或目录file1/dir1的所属用户改为zhangsan用户，-R处理指定目录以及其子目录下的所有文件 chown -R zhangsan file1/dir1 2、修改文件所属组 chgrp groupAfile1/dir1# 将 file1/dir1的所属组改为groupA组 ...
2020-07-10 10:35:16
4578
原创 Hive服务停止导致Flume收集数据到Hive后无法通过Hue使用分区查询
首先要说明的是本篇所解决的问题 1、hive分区没创建成功。 2、分区下面小文件过多。 3、合并小文件后新生成的文件没有按指定格式压缩。 数据流场景如下图： Hive分区按每小时4个每15分钟生成一个的策略，也就是说每小时会有mm=00、mm=15、mm=30、mm=45 四个分区。 问题背景： 当时在通过Cloudera Manager做HDFS的HA操作，因此要停止Hive服务执行更新Hive MetaStore NameNode操作，导致执行2个小时的过程中没有生成...
2020-07-07 18:18:51
506
原创 开启Kerberos的CDH增加新节点后刷新集群出现的异常
2020-07-02 14:02:46,504 WARN org.apache.hadoop.security.UserGroupInformation: PriviledgedActionException as:hdfs/xxxx@xxxx.COM (auth:KERBEROS) cause:org.apache.hadoop.ipc.RemoteException(javax.securi ty.sasl.SaslException): GSS initiate failed 2020-07-02 .
2020-07-02 16:08:12
1630
1
云计算入门
2013-05-08
jdk1.8.0_131和JCE无限制权限策略文件
2020-07-23
springbooot2.x-phoenix-hbase.zip
2020-05-14
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人