查看节点hdfs文件负载
查看各节点hdfs文件使用情况:hdfs dfsadmin -report
hdfs dfsadmin -report > balance
cat balance | grep "DFS Used%"
cat balance | grep "Name"
负载均衡
查出上边各个节点使用率,将使用率高的和使用率低的做一个负载均衡
将corehadoop04,corehadoop19,corehadoop20,corehadoop21,corehadoop22,corehadoop23,corehadoop24,corehadoop25节点做个负载均衡
[hdfs@corehadoop04 tools]$ cat hdfs_balance.sh
hdfs dfsadmin -fs hdfs://cluster01:8020 -setBalancerBandwidth 6291456000
hdfs balancer -include corehadoop04,corehadoop19,corehadoop20,corehadoop21,corehadoop22,corehadoop23,corehadoop24,corehadoop25 -threshold 4