首页 > 大数据平台 > hadoop > hadoop添加core节点后balancer
2016
09-08

hadoop添加core节点后balancer

hadoop 集群存储空间不够了,新加了2台core节点后需要把存储均衡

hadoop 用户下执行

hdfs  dfsadmin -setBalancerBandwidth 50000000
设置banlieue速度, 这里推荐使用50M的带宽
/home/hadoop/sbin/start-balancer.sh -threshold 8   
threshold  这个是 和磁盘平均使用率的差
现象 
tailf /home/hadoop/logs/hadoop-hadoop-balancer-uhadoop-ulp40s-master1.log
可以看到有数据移动

执行一次就行 所有 core 节点 都会处于 比较平均的状态, 整个过程持续的时间 跟数据量有关

最后编辑:
作者:saunix
大型互联网公司linux系统运维攻城狮,专门担当消防员

留下一个回复