hadoop的文件系统一致模型

本文深入探讨了Hadoop文件系统中文件可见性的原理及其在实际使用中的注意事项。详细解释了如何通过同步操作确保文件数据在文件系统中的可见性,并提供了在特定场景下强制执行同步的方法。同时强调了合理利用文件可见性的策略,避免将其作为信号标记的不恰当用途。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

相当于java同步的可见性,在一个块被写满后,存储他的数据才是可见的,即使文件描述本身可见,但其长度可能为0.即使数据已经真实地写到块中。

在绝对大多数时候这并不影响我们对文件的需求。对于存储在hadoop上的文件,我们绝对不是拿文件中内容作为一个信号标记,如果你这么用只能

说明你不了解他的设计目的。

但万一你有这样变态的需求,你仍然可以调用sync来强制未写满的块上的数据可以在文件系统中可见。

一般情况下你完全可以等文件写操作完成后,调用close方法时让他隐含调用sync来进行文件的可见性发布。


评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值