暂无图片
OushuDB中如何进行均衡HDFS
我来答
分享
八九
2020-10-09
OushuDB中如何进行均衡HDFS

OushuDB中如何进行均衡HDFS

我来答
添加附件
收藏
分享
问题补充
1条回答
默认
最新
丁冉
sudo -u hdfs hdfs balancer -threshold 5

其中5为threshold_value,表示一个DataNode的磁盘使用可以和其他节点相比的偏移量。threshold_value越小,均衡时间越长。

如果你不指定threshold_value,默认值是20%。例如,如果这个集群的磁盘使用率是40%,threshold_value为20%会使得所有机器的磁盘使用率在 20%和60%之间。如果一个节点的使用率在20%和60%之间,它上面的块不会再被移动。

建议设置threshold_value为5

均衡时间也会受到网络带宽的影响。默认均衡可以使用的带宽为1MB/s,你可以使用下面的命令调整。建议设为64MB。

sudo -u hdfs hdfs dfsadmin -setBalancerBandwidth 67108864
暂无图片 评论
暂无图片 有用 0
回答交流
提交
问题信息
请登录之后查看
邀请回答
暂无人订阅该标签,敬请期待~~
暂无图片墨值悬赏