hadoop 报错 org.apache.hadoop.hdfs.server.namenode.LeaseExpiredException

blackproof

于 2013-09-26 23:26:22 发布

阅读量763

点赞数

CC 4.0 BY-SA版权

分类专栏： hadoop 文章标签： hadoop 报错

本文链接：https://blog.youkuaiyun.com/blackproof/article/details/88302044

43 篇文章

订阅专栏

本文介绍了如何解决Hadoop中DFSClient在关闭文件时遇到的LeaseExpiredException异常。通过调整Linux系统的最大文件打开限制及优化Hadoop配置，可以有效避免此问题的发生。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

报错：

org.apache.hadoop.hdfs.DFSClient:Failed to close file

org.apache.hadoop.ipc.RemoteException(org.apache.hadoop.hdfs.server.namenode.LeaseExpiredException)

解决方法：

修改linux打开文件最大限制

echo "fs.file-max = 65535" >> /etc/sysctl.conf 
echo "* - nofile 65535" >> /etc/security/limits.conf
sysctl -p

ulimit -n

修改hadoop配置

vi hdfs-site.xml

<property>
  <name>dfs.datanode.max.xcievers</name>
  <value>8192</value>
</property>