CDH起datanode服务时遇到的异常及解决方法

最新推荐文章于 2022-05-18 18:15:20 发布

原创最新推荐文章于 2022-05-18 18:15:20 发布 · 1.6k 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#CDH #HDFS

大数据专栏收录该内容

21 篇文章

订阅专栏

在启动CDH的datanode服务时遇到了权限不足的问题，异常原因是hdfs用户的权限不够。解决方法是使用sudo chown -R hdfs:hdfs /opt命令修改目录权限，之后重启服务。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

报错内容

WARN org.apache.hadoop.hdfs.server.datanode.DataNode: Invalid dfs.datanode.data.dir /opt/dfs/dn: 
ExitCodeException exitCode=1: chmod: changing permissions of `/opt/dfs/dn': Operation not permitted

    at org.apache.hadoop.util.Shell.runCommand(Shell.java:538)
    at org.apache.hadoop.util.Shell.run(Shell.java:455)
    at org.apache.hadoop.util.Shell$ShellCommandExecutor.execute(Shell.java:715)
    at org.apache.hadoop.util.Shell.execCommand(Shell.java:808)
    at org.apache.hadoop.util.Shell.execCommand(Shell.java:791)
    at org.apache.hadoop.fs.RawLocalFileSystem.setPermission(RawLocalFileSystem.java:656)
    at org.apache.hadoop.fs.FilterFileSystem.setPermission(FilterFileSystem.java:490)
    at org.apache.hadoop.util.DiskChecker.mkdirsWithExistsAndPermissionCheck(DiskChecker.java:140)
    at org.apache.hadoop.util.DiskChecker.checkDir(DiskChecker.java:156)
    at org.apache.hadoop.hdfs.server.datanode.DataNode$DataNodeDiskChecker.checkDir(DataNode.java:2239)
    at org.apache.hadoop.hdfs.server.datanode.DataNode.checkStorageLocations(DataNode.java:2281)
    at org.apache.hadoop.hdfs.server.datanode.DataNode.makeInstance(DataNode.java:2263)
    at org.apache.hadoop.hdfs.server.datanode.DataNode.instantiateDataNode(DataNode.java:2155)
    at org.apache.hadoop.hdfs.server.datanode.DataNode.createDataNode(DataNode.java:2202)
    at org.apache.hadoop.hdfs.server.datanode.DataNode.secureMain(DataNode.java:2378)
    at org.apache.hadoop.hdfs.server.datanode.DataNode.main(DataNode.java:2402)

异常原因 ：hdfs用户的权限不够

解决方法： sudo chown -R hdfs:hdfs /opt
打开权限即可。然后重启