访问HDFS报错：org.apache.hadoop.security.AccessControlException: Permission denied

最新推荐文章于 2022-12-04 00:24:33 发布

i_m_jack

最新推荐文章于 2022-12-04 00:24:33 发布

阅读量1.4k

点赞数 1

分类专栏： hadoop

hadoop 专栏收录该内容

6 篇文章

订阅专栏

博客围绕Hadoop访问HDFS时出现的权限认证问题展开。提到网上解决方法，作者认为不可取。还介绍了Hadoop取用户名的过程，先读HADOOP_USER_NAME系统环境变量，为空则读Java环境变量，再不行从特定实例获取，都失败则抛异常。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

Exception in thread “main” org.apache.hadoop.security.AccessControlException: Permission denied: use

import org.apache.hadoop.conf.Configuration;
import org.apache.hadoop.fs.FileSystem;
import org.apache.hadoop.fs.Path;

public class TestHDFS {
    public static void main(String[] args) throws Exception{
        Configuration conf = new Configuration();
        conf.set("fs.defaultFS", "hdfs://192.168.0.104:9000");
        FileSystem fs = FileSystem.get(conf);

        //存在的情况下会覆盖之前的目录
        boolean success = fs.mkdirs(new Path("/xiaol"));
        System.out.println(success);
    }
}

Exception in thread “main” org.apache.hadoop.security.AccessControlException: Permission denied: user=xiaol, access=WRITE, inode="/xiaol":root:supergroup:drwxr-xr-x

网上的方法：

1.在hdfs的配置文件中，将dfs.permissions.enabled修改为False

2.hadoop fs -chmod 777 /

我觉得这俩方法都是屎

hadoop在访问hdfs的时候会进行权限认证，取用户名的过程是这样的：

读取HADOOP_USER_NAME系统环境变量，如果不为空，那么拿它作username，如果为空

读取HADOOP_USER_NAME这个java环境变量，如果为空

从com.sun.security.auth.NTUserPrincipal或者com.sun.security.auth.UnixPrincipal的实例获取username。

如果以上尝试都失败，那么抛出异常LoginException(“Can’t find user name”)

import org.apache.hadoop.conf.Configuration;
import org.apache.hadoop.fs.FileSystem;
import org.apache.hadoop.fs.Path;
import java.util.Properties;

public class TestHDFS {
    public static void main(String[] args) throws Exception{
        Properties properties = System.getProperties();
        properties.setProperty("HADOOP_USER_NAME", "root");

        Configuration conf = new Configuration();
        conf.set("fs.defaultFS", "hdfs://192.168.0.104:9000");
        FileSystem fs = FileSystem.get(conf);

        //存在的情况下会覆盖之前的目录
        boolean success = fs.mkdirs(new Path("/xiaol"));
        System.out.println(success);
    }
}