HDFS 节点Decommission速度优化

dfs.namenode.replication.work.multiplier.per.iteration  32  每次复制的块的个数为 dn的个数* 该参数
dfs.namenode.replication.max-streams    64  进行复制任务分配时,单个DN 任务的最大值
dfs.namenode.replication.max-streams-hard-limit 128 若DN 的复制任务大于改值时,不会将其选为复制的源节点

参考资料
https://bbs.huaweicloud.com/forum/thread-73286-1-1.html

你可能感兴趣的:(HDFS 节点Decommission速度优化)