allen的博客

原文中 对DataNode解除授权前调优HDFS 减少同时下线的节点数量：最多同时停用 n−1n - 1n−1 个DataNode进行下线操作，等待下线完成后，进行副本检查（nnn 为副本数） hdfs fsck / -list-corruptfileblocks -openforwrite -files -blocks -locations 2>&1 > /tmp/h...

from pyhdfs import HdfsClient from config import config class OperaHdfs(object): def __init__(self): self.hosts = 'nn1.example.com:50070,nn2.example.com:50070' self.fs = HdfsClie...