
大数据运维hadoop
文章平均质量分 80
hadoop搭建学习
2021xyz666
技术改变人生
技术改变世界
展开
-
hadoop配额管理命令详解
1.hdfs空间配额与文件数配额 hadoop fs -mkdir /tmp/file ##创建测试目录 hdfs dfsadmin -setSpaceQuota 4t /tmp/file ##设置空间配额;大小写均可: t/T g/G m/M 或者: hdfs dfsadmin -setSpaceQuota 2097152...原创 2021-07-10 15:16:55 · 1082 阅读 · 1 评论 -
hadoop客户端配置识别两个高可用(ha)集群的逻辑名称访问
1.相关配置参数原创 2021-07-02 15:23:15 · 4269 阅读 · 0 评论 -
linux ACL与hdfs ACL权限设置
linux acl权限设置 getfacl:取得某个文件/目录的ACL设置项目 setfacl:设置某个文件/目录的ACL设置项目 setfacl 参数 -m:设置后续acl参数 -x:删除后续acl参数 -b:删除全部的acl参数 -k:删除默认的acl参数 -R:递归设置acl,包括子目录 -d:设置默认acl setfacl -m u:user1:rx /test/acl_test ##设置用户acl权限 setfacl -m u:gr...原创 2021-04-30 23:05:22 · 704 阅读 · 1 评论 -
cloudera manager5.13.1安装使用
##cloudera官网: https://docs.cloudera.com/ ##cm环境要求说明: https://docs.cloudera.com/documentation/enterprise/release-notes/topics/rn_consolidated_pcm.html#TLS_Security_Versions_Table ##cm下载地址: http://archive.cloudera.com/cm5/cm/5/ 搜索: cloudera-manager-.原创 2020-08-31 23:52:47 · 998 阅读 · 0 评论 -
hdfs与Linux的umask学习研究
Linux umask 在/etc/profile环境变量中,可以发现uid大于199的用户,umask值为002;否则umask值为022;即普通用户创建文件或者文件夹权限为775,root用户创建文件或者文件夹权限为755. 实际测试发现,无论root还是普通用户,创建文件夹权限和预期一致;创建文件时x权限会被回收。 hdfs umask 以Hadoop 2.6.0-cdh5.16.1为例,在官方地址http://archive.cloudera.com/cdh5/cdh/5/.原创 2020-05-21 10:50:23 · 577 阅读 · 0 评论