关于hadoop1.2.1文件的追加

最新推荐文章于 2022-04-03 12:33:25 发布

原创最新推荐文章于 2022-04-03 12:33:25 发布 · 1.5k 阅读

CC 4.0 BY-SA版权

文章标签：

本文探讨了如何在不推荐使用append操作的Hadoop1.x版本中实现文件追加功能，通过设置特定参数，实现了在不升级到更高版本的情况下进行追加操作。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

虽然，hadoop1.x的版本不推荐使用append操作，但是系统中还是希望添加这样的功能，尝试了很多方法之后，最终在hadoop releasenotes中发现了可以给文件追加内容的方式

HADOOP-8230. Major improvement reported by eli2 and fixed by eli
Enable sync by default and disable append

Append is not supported in Hadoop 1.x. Please upgrade to 2.x if you need append. If you enabled dfs.support.append for HBase, you're OK, as durable sync (why HBase required dfs.support.append) is now enabled by default. If you really need the previous functionality, to turn on the append functionality set the flag " dfs.support.broken.append" to true.
设置 dfs.support.broken.append为true即可完成追加操作。