namenode由于jn写入超时异常

最新推荐文章于 2023-07-23 21:41:04 发布

原创最新推荐文章于 2023-07-23 21:41:04 发布 · 301 阅读

0 ·

CC 4.0 BY-SA版权

文章标签：

#hadoop

Bug记录专栏收录该内容

12 篇文章

订阅专栏

本文介绍了如何在HDFS-site.xml中配置dfs.qjournal.start-segment.timeout.ms、dfs.qjournal.select-input-streams.timeout.ms和dfs.qjournal.write-txns.timeout.ms，以提升Namenode写入性能。同时提到core-site.xml中的ipc.client.connect.timeout设置。

在这里插入图片描述

在hdfs-site.xml添加如下配置：

<property>
<!-- EditLog会被切割为很多段，每一段称为一个segment，Namenode发起新写入editlog的RPC调用，会使用startLogSegment方法，该参数表示发起新segment的超时时间 -->
    <name>dfs.qjournal.start-segment.timeout.ms</name>
    <value>90000</value>
</property>
<property>
    <name>dfs.qjournal.select-input-streams.timeout.ms</name>
    <value>90000</value>
</property>
<property>
<!--写入超时时间 -->
    <name>dfs.qjournal.write-txns.timeout.ms</name>
    <value>90000</value>
</property>