本文主要探讨了Hadoop中用于写入数据的FSDataOutputStream类，详细介绍了如何通过FileSystem创建实例，包括使用create()和append()方法。在使用append()时需要注意dfs.support.append配置属性，以及早期版本不支持append操作的问题。此外，文章还提醒在获取文件大小时，FileStatus.getLen()在写入过程中可能不准确，建议使用FSDataInputStream的size()方法来获取缓冲区的实时大小。
对于一般文件，都有满足随机读写的api。而hadoop中的读api很简单用FSDataInputStream类就可以满足一般要求，而hadoop中的写操作却是和普通java操作不一样。
hadoop对于写操作提供了一个类：FSDataOutputStream，这个类重载了很多write方法，用于写入很多类型的数据：比如字节数组，long，int，char等等。像FSDataInputStream一样，要获得FSDataOutputStream的实例，必须通过FileSystem该类来和HDFS建立连接，然后通过路径返回FSDataOutputStream实例。FileSystem返回FSDataOutputStream实例的方法有两组：
- create(Path p)函数，创建一个空文件，然后可以向该文件顺序写入
- append(Path p)函数，打开一个已有文件，并最做文件末尾追加数据
在使用append的操作时可能返回异常
最低0.47元/天 解锁文章
扫一扫
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
